DE102012000789A1 - Method for operating pedestrian protection system for reducing accident severity during front collision with pedestrian in motor vehicle, involves evaluating measuring data of detection devices by safety systems - Google Patents

Method for operating pedestrian protection system for reducing accident severity during front collision with pedestrian in motor vehicle, involves evaluating measuring data of detection devices by safety systems Download PDF

Info

Publication number
DE102012000789A1
DE102012000789A1 DE201210000789 DE102012000789A DE102012000789A1 DE 102012000789 A1 DE102012000789 A1 DE 102012000789A1 DE 201210000789 DE201210000789 DE 201210000789 DE 102012000789 A DE102012000789 A DE 102012000789A DE 102012000789 A1 DE102012000789 A1 DE 102012000789A1
Authority
DE
Germany
Prior art keywords
motor vehicle
detection device
optical detection
criterion
collision
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE201210000789
Other languages
German (de)
Other versions
DE102012000789B4 (en
Inventor
Carlos Garcia de Caceres
Johann Stoll
Franz Roth
Verena Horz
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to DE102012000789.2A priority Critical patent/DE102012000789B4/en
Publication of DE102012000789A1 publication Critical patent/DE102012000789A1/en
Application granted granted Critical
Publication of DE102012000789B4 publication Critical patent/DE102012000789B4/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0136Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to actual contact with an obstacle, e.g. to vehicle deformation, bumper displacement or bumper velocity relative to the vehicle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles

Abstract

The method involves evaluating the measuring data of the detection devices (8,9) by safety systems (10,11) depending on an actuation condition. The actuation condition has a platform break through criteria evaluated depending on measuring data of a three-dimensional optical detection device, where it is tested whether a collision object breaks through a vertical place cutting an engine hood (4) of the motor vehicle along a line that has a predetermined distance to the front end of a motor vehicle (1). Measuring data of two detection devices, particularly the optical detection device and a collision sensor (13), are evaluated in line with the actuation condition. An independent claim is included for a motor vehicle with an optical detection element.

Description

Die Erfindung betrifft ein Verfahren zum Betrieb eines Fußgängerschutzsystems zur Unfallschwereminderung bei Frontalkollisionen mit Fußgängern in einem Kraftfahrzeug, wobei wenigstens ein Sicherheitssystem in Abhängigkeit wenigstens einer Auslösebedingung, die Messdaten wenigstens einer Erfassungseinrichtung auswertet, ausgelöst wird. Daneben betrifft die Erfindung ein Kraftfahrzeug mit einem Fußgängerschutzsystem.The invention relates to a method for operating a pedestrian protection system for reducing the accident severity during head-on collisions with pedestrians in a motor vehicle, wherein at least one safety system is triggered as a function of at least one triggering condition evaluating the measurement data of at least one detection device. In addition, the invention relates to a motor vehicle with a pedestrian protection system.

Zum Schutz von Fußgängern bei einem Frontalunfall mit Kraftfahrzeugen werden heutzutage verschiedene, durch Sicherheitssysteme realisierte Maßnahmen vorgeschlagen, insbesondere passive Maßnahmen. Dabei sind Fußgängerschutzsysteme bekannt, bei denen als Erfassungseinrichtungen ein oder mehrere Kollisionssensoren (Kontaktsensoren) im Frontalbereich (Frontend) des Kraftfahrzeugs verbaut sind. Diese Kollisionssensoren detektieren in der Regel einen Aufprall eines Fußgängers oder eines beliebigen Gegenstandes. Eine entsprechende Algorithmik wertet verschiedene Merkmale der Messdaten (Sensorsignale) aus und entscheidet anhand einer Auslösebedingung, die auch verschiedene, verschachtelte Kriterien umfassen kann, ob ein Sicherheitssystem insbesondere als passive Maßnahme ausgelöst werden soll.For the protection of pedestrians in a frontal accident with motor vehicles, various measures implemented by safety systems are proposed today, in particular passive measures. Pedestrian protection systems are known in which one or more collision sensors (contact sensors) in the frontal area (front end) of the motor vehicle are installed as detection devices. These collision sensors usually detect a collision of a pedestrian or any object. A corresponding algorithm evaluates various features of the measured data (sensor signals) and decides on the basis of a triggering condition, which may also include various nested criteria, whether a safety system should be triggered in particular as a passive measure.

Als mögliches Sicherheitssystem offenbart beispielsweise die DE 10 2005 012 136 A1 ein Fußgänger-Airbagsystem, das einen im Bereich der Windschutzscheibe aufzublasenden Außenairbag beschreibt. Das Fußgänger-Airbagsystem ist nahe der Hinterkante der Motorhaube eines Kraftfahrzeugs an diese montierbar und kann durch eine Auslösebedingung entsprechend ausgelöst werden. Auch DE 100 13 563 A1 und DE 10 2007 029 987 B4 offenbaren solche Windschutzscheiben-Außenairbags, die sich über die Windschutzscheibe eines Kraftfahrzeugs legen, um dort den Aufprall eines Fußgängers dämpfen zu können. Diese Veröffentlichungen zeigen zudem auch ein zweites, bekanntes Sicherheitssystem zum Fußgängerschutz, nämlich eine anstellbare Motorhaube des Kraftfahrzeugs, welche zum Schutz des Fußgängers um einen bestimmten Winkel geöffnet wird. DE 10 2005 012 357 A1 beschreibt als weiteres Sicherheitssystem eine Höhenverstellungseinheit, die, während eine Hebeeinheit eine Motorhaube des Kraftfahrzeugs anhebt, das Kraftfahrzeug so absenkt, dass der Fußgänger auf die Motorhaube gelenkt und durch einen Windschutzscheiben-Außenairbag geschützt wird.As a possible security system, for example, the DE 10 2005 012 136 A1 a pedestrian airbag system which describes an external airbag to be inflated in the area of the windshield. The pedestrian airbag system can be mounted on the rear edge of the hood of a motor vehicle and can be triggered by a trigger condition accordingly. Also DE 100 13 563 A1 and DE 10 2007 029 987 B4 disclose such external windshield airbags that lie over the windshield of a motor vehicle to attenuate the impact of a pedestrian there can. These publications also show a second known safety system for pedestrian protection, namely a engagable hood of the motor vehicle, which is opened to protect the pedestrian by a certain angle. DE 10 2005 012 357 A1 describes as a further safety system a height adjustment unit which, while a lifting unit lifts an engine hood of the motor vehicle, lowers the motor vehicle so that the pedestrian is steered onto the hood and protected by a windshield outer airbag.

Problematisch hierbei ist, dass die Sensoren keine sichere Klassifikation bezüglich eines realen Fußgängers ausgeben können und die Algorithmen auch auf das Auslösen eines Ersatzimpaktors ausgelegt sind, so dass die oben genannten Maßnahmen bzw. Sicherheitssysteme auch fälschlicherweise ausgelöst werden können, wenn der Eintrag eines Objekts im Frontend des Kraftfahrzeugs dem eines Fußgängers oder eines Ersatzimpaktors ähnlich ist. Auch optische Erfassungseinrichtungen, insbesondere optische Sensoren, können üblicherweise nicht mit hinreichender Sicherheit die Klasse „Fußgänger” identifizieren, so dass es zu Fehlauslösungen kommen kann.The problem here is that the sensors can not issue a safe classification with respect to a real pedestrian and the algorithms are designed to trigger a Ersatzimpaktors so that the above measures or safety systems can also be triggered by mistake when the entry of an object in the front end of the motor vehicle is similar to that of a pedestrian or a Ersatzimpaktors. Even optical detection devices, in particular optical sensors, usually can not identify with sufficient certainty the class "pedestrian", so that it can lead to false triggering.

Zwar können bei reversiblen Maßnahmen, also Sicherheitssystemen, bei denen die Aktuatoren auch zur Zurückstellung des ausgelösten Sicherheitssystems ausgebildet sind, Falschauslösungen noch akzeptiert werden, da sie vom Fahrer selbst oder einer entsprechenden Werkstatt problemlos zurückgestellt werden können, beispielsweise im Fall einer rückstellbaren crashaktiven Motorhaube. Allerdings wird ein falsch ausgelöstes Sicherheitssystem, insbesondere ein Außenairbag, vermutlich vom Fahrer bemängelt werden. Zudem besteht bei einem falsch ausgelösten Außenairbag an der Windschutzscheibe das Problem, dass die Sicht des Fahrers verdeckt werden kann.Although in reversible measures, ie safety systems in which the actuators are also designed to defer the triggered safety system, false releases are still acceptable because they can be easily reset by the driver or a corresponding workshop, for example in the case of resettable crash-active hood. However, a falsely triggered safety system, especially an outside airbag, will probably be faulted by the driver. In addition, there is a problem with a wrong triggered external airbag on the windshield that the driver's view can be obscured.

Dabei kann es beispielsweise bei der Auswertung von optischen Messdaten zu Falschauslösungen durch fliegende Plastiktüten, Vögel, Äste und dergleichen kommen, wobei bei einem Kontaktsensor bzw. Kollisionssensor im Frontend eine Falschauslösung bei Kleintieren, Wild, fliegenden Plastiktüten, Steckpfosten, Leitbaken, Bällen und dergleichen auftreten kann.False triggering by flying plastic bags, birds, branches and the like may occur, for example, in the evaluation of optical measurement data, with a contact sensor or collision sensor in the front end a false triggering of small animals, game, flying plastic bags, mullions, beacons, balls and the like can.

Um die Gefahr der Falschauslösung zu reduzieren, wurde durch DE 10 2005 006 763 A1 vorgeschlagen, eine erste berührungslose Sensoreinrichtung und eine eine Krafteinwirkung eines Objekts beim Aufprall auf das Kraftfahrzeug erfassende zweite Sensoreinrichtung vorzusehen. So sollen zwei unabhängige Sensoren jeweils ein Ereignis bestätigen, um Falschauslösungen zu vermeiden. Konkret wird dort vorgeschlagen, basierend auf der Krafteinwirkung und der Relativgeschwindigkeit eine Masse-kennzeichnende und/oder eine Härte-kennzeichnende Größe des ersten Objekts zu schätzen und das Objekt als bestimmten Objekttyp zu erkennen, wenn die geschätzte Masse-kennzeichnende und/oder Härte-kennzeichnende Größe innerhalb eines vorgegebenen Bereichs liegt. Dabei ist jedoch eine äußerst komplexe Auswertungsalgorithmik notwendig, die selbst wieder anfällig für Fehler ist und eine Vielzahl von Merkmalen der Messdaten komplex verknüpfen muss, insbesondere auch im Hinblick auf Kriterien der Auslösebedingung.To reduce the risk of false triggering was through DE 10 2005 006 763 A1 proposed to provide a first non-contact sensor device and a second sensor device detecting a force of an object upon impact with the motor vehicle. Thus, two independent sensors should each confirm an event to avoid false triggering. Specifically, there, it is proposed to estimate a mass-indicative and / or a hardness-indicative size of the first object based on the force and the relative velocity and to recognize the object as a specific object type when the estimated mass-indicative and / or hardness-indicative Size is within a specified range. However, an extremely complex evaluation algorithm is necessary, which itself is again susceptible to errors and has to complexly connect a large number of features of the measurement data, in particular also with regard to criteria of the triggering condition.

Der Erfindung liegt daher die Aufgabe zugrunde, ein Verfahren zum Betrieb eines Fußgängerschutzsystems anzugeben, bei welchem auf einfache Weise ein insbesondere der Plausibilisierung dienendes, verlässliches weiteres Kriterium innerhalb der Auslösebedingung realisiert werden kann.The invention is therefore based on the object to provide a method for operating a pedestrian protection system, in which in a simple way, in particular the plausibility Serving, reliable further criterion within the trigger condition can be realized.

Zur Lösung dieser Aufgabe ist bei einem Verfahren der eingangs genannten Art erfindungsgemäß vorgesehen, dass die Auslösebedingung ein in Abhängigkeit von Messdaten einer dreidimensionalen optischen Erfassungseinrichtung ausgewertetes Ebenendurchbruchskriterium umfasst, worin überprüft wird, ob ein Kollisionsobjekt eine die Motorhaube des Kraftfahrzeugs entlang einer einen vorbestimmten Abstand zum vorderen Ende des Kraftfahrzeugs aufweisenden Linie schneidende Vertikalebene durchbricht.To solve this problem, it is provided according to the invention in a method of the type mentioned that the trigger condition comprises a level breakdown criterion evaluated as a function of measured data of a three-dimensional optical detection device, wherein it is checked whether a collision object is a motor vehicle hood along a predetermined distance to the front End of the motor vehicle having line intersecting vertical plane breaks through.

Erfindungsgemäß wird also vorgeschlagen, dass eine dreidimensionale optische Erfassungseinrichtung, insbesondere ein optischer Sensor, Messdaten liefert, so dass ein Ebenendurchbruchskriterium ausgewertet werden kann, das letztlich eine Art „virtuellen Vorhang” beschreibt. Dem liegt die Erkenntnis zugrunde, dass der Einsatz mancher Sicherheitssysteme eben nur genau dann sinnvoll ist, wenn das Kollisionsobjekt, insbesondere der Fußgänger, sich auch über die Motorhaube weiter in Richtung auf die Windschutzscheibe zu bewegt, was häufig auch als „Überklappen” bezeichnet wird. Dies gilt insbesondere für Sicherheitssysteme, die im Bereich der Windschutzscheibe wirken, beispielsweise einen Windschutzscheiben-Außenairbag.According to the invention, it is therefore proposed that a three-dimensional optical detection device, in particular an optical sensor, provides measurement data so that a plane breakdown criterion can be evaluated, which ultimately describes a type of "virtual curtain". This is based on the finding that the use of some security systems only just makes sense if the collision object, in particular the pedestrian, also moves on the hood towards the windshield, which is often referred to as "folding over". This is especially true for security systems that work in the area of the windshield, such as a windshield exterior airbag.

Mithin wird als virtueller Vorhang eine vertikale Fläche bzw. Ebene im Raum relativ zu dem Verbauort der dreidimensionalen optischen Erfassungseinrichtung definiert, deren Durchdringung aufgrund der Dreidimensionalität der Daten leicht überprüft werden kann. Die genaue Lage der Vertikalebene sollte dabei so gewählt werden, dass Fehlauslösungen, beispielsweise durch teilüberklappende, dann aber zurückschnellende Leitbaken und dergleichen, möglichst vermieden werden, zum anderen aber auch so, dass unter Berücksichtigung der Datenrate der optischen Erfassungseinrichtung und der übrigen Latenzzeiten das Sicherheitssystem rechtzeitig ausgelöst wird, um seine unfallfolgenmindernde Wirkung beizubehalten. Beispielsweise kann sich ergeben, dass die Sensierungszeit der optischen Erfassungseinrichtung im Bereich von 5 bis 30 ms liegen sollte. Vorteilhaft ist es zudem, wenn die optische Erfassungseinrichtung so ausgelegt wird, dass nacheinander gemessene Messdaten der optischen Erfassungseinrichtung gegeneinander plausibilisiert werden, das bedeutet, dass die Erfassungsrate so gewählt wird, das nicht nur auf einen einzigen, einen Durchbruch der Vertikalebene anzeigenden Wert, der ein Messfehler sein könnte, bereits reagiert wird, sondern aufeinanderfolgende Messdaten den Durchbruch anzeigen müssen. Hier kann, je nach konkreter Ausgestaltung des Kraftfahrzeugs, eine Erfassungsrate der optischen Erfassungseinrichtung im Bereich von 150 oder mehr Hz, insbesondere 200 Hz, bevorzugt sein.Thus, as a virtual curtain, a vertical plane is defined in the space relative to the installation location of the three-dimensional optical detection device, the penetration of which can be easily checked due to the three-dimensionality of the data. The exact position of the vertical plane should be chosen so that false triggering, for example by partially overlapping, but then zurückschnellende beacons and the like, as possible avoided, on the other hand so that taking into account the data rate of the optical detection device and the remaining latencies, the security system in good time is triggered to maintain its impact-mitigating effect. For example, it may be found that the sensing time of the optical detector should be in the range of 5 to 30 ms. In addition, it is advantageous if the optical detection device is designed so that successively measured measurement data of the optical detection device are plausibilized against each other, that is, the detection rate is chosen so that not only on a single, a breakthrough of the vertical plane indicative value, the Measurement error could be, is already responding, but successive measurement data must show the breakthrough. Here, depending on the specific embodiment of the motor vehicle, a detection rate of the optical detection device in the range of 150 or more Hz, in particular 200 Hz, may be preferred.

Mithin kann mit besonderem Vorteil vorgesehen sein, dass als optische Erfassungseinrichtung eine PMD-Kamera verwendet wird. Derartige Erfassungseinrichtungen werden häufig auch als TOF-Kameras (Time-of-Flight-Kameras) bezeichnet und sind mit derart hohen Erfassungsraten erhältlich. PMD-Kameras liefern neben der üblichen, pixelweisen optischen Information für jedes ihrer Pixel auch eine Entfernungsinformation, die bezüglich des „virtuellen Vorhangs” ausgewertet werden kann. Es sei jedoch darauf hingewiesen, dass auch andere, schnelle optische Erfassungseinrichtungen problemlos eingesetzt werden können.Consequently, it can be provided with particular advantage that a PMD camera is used as the optical detection device. Such detection devices are often referred to as TOF (time-of-flight) cameras and are available at such high acquisition rates. In addition to the usual, pixel-by-pixel optical information, PMD cameras also provide distance information for each of their pixels, which can be evaluated with regard to the "virtual curtain". It should be noted, however, that other, fast optical detection devices can be used without problems.

Das hier dargestellte Ebenendurchbruchskriterium stellt eine äußerst sichere Variante dar, die Auslösung von insbesondere nur bei auf die Motorklappe überklappenden, gen Windschutzscheibe bewegten Kollisionsobjekten, insbesondere natürlich Fußgängern, sinnvoller Sicherheitssysteme zu steuern, wobei es besondere im Rahmen einer Plausibilisierung geeignet ist.The level breakdown criterion presented here represents an extremely safe variant of controlling the triggering of collision objects, in particular of course pedestrians, of meaningful security systems, especially when the motor windscreen is folded over and moved against the windscreen, whereby it is particularly suitable for plausibility checking.

Mithin kann das erfindungsgemäße Verfahren besonders vorteilhaft dadurch verbessert werden, dass im Rahmen der Auslösebedingung Messdaten von wenigstens zwei auf unterschiedlichen Prinzipien basierenden Erfassungseinrichtungen, insbesondere der optischen Erfassungseinrichtung und wenigstens eines bei Berührung mit einem Kollisionsobjekt ansprechenden Kollisionssensors, ausgewertet werden. In diesem Fall dient das Ebenendurchbruchskriterium letztlich zur Plausibilisierung eines Fußgängerunfalls, nachdem neben der optischen Erfassungseinrichtung noch wenigstens eine weitere, auf einem unterschiedlichen Messprinzip basierende Erfassungseinrichtung vorliegt, deren Messdaten ebenso in der wenigstens einen Auslösebedingung berücksichtigt werden. Bei der weiteren Erfassungseinrichtung handelt es sich zweckmäßigerweise um die heutzutage ohnehin häufig vorgesehenen Kollisionssensoren, die auf verschiedene Art und Weise einen Kontakt eines Objekts mit dem Kraftfahrzeug vermessen können. In einem konkreten Realisierungsbeispiel können Beschleunigungssensoren am Stoßfänger des Kraftfahrzeugs vorgesehen werden und/oder Kontaktsensoren wie Lichtleitfasern, kraftsensitive Sensoren und dergleichen eingesetzt werden. Verschiedenste, aus dem Stand der Technik grundsätzlich bekannte Möglichkeiten sind denkbar.Consequently, the method according to the invention can be improved particularly advantageously by evaluating measurement data from at least two detection devices based on different principles, in particular the optical detection device and at least one collision sensor responsive to contact with a collision object, within the context of the triggering condition. In this case, the level breakdown criterion ultimately serves to validate a pedestrian accident, since in addition to the optical detection device there is at least one further detection device based on a different measurement principle whose measurement data are also taken into account in the at least one triggering condition. The further detection device is expediently the collision sensors which are already frequently provided today and which can measure a contact of an object with the motor vehicle in various ways. In a concrete realization example, acceleration sensors can be provided on the bumper of the motor vehicle and / or contact sensors such as optical fibers, force-sensitive sensors and the like can be used. Various, basically known from the prior art possibilities are conceivable.

In einer besonders zweckmäßigen Ausgestaltung der vorliegenden Erfindung kann in diesem Zusammenhang vorgesehen sein, dass bei Detektion einer Frontalkollision mittels der weiteren Erfassungseinrichtung wenigstens ein Sicherheitssystem nur bei Erfüllung des Ebenendurchbruchskriteriums ausgelöst wird. Es findet also eine Plausibilisierung, insbesondere im Hinblick auf im Bereich der Windschutzscheibe wirkende Sicherheitssysteme, statt. Umfasst ein Kraftfahrzeug in einem konkreten Ausführungsbeispiel beispielsweise eine anstellbare Motorhaube und einen Windschutzscheiben-Außenairbag als Sicherheitssysteme, so kann bei einer über Kollisionssensoren festgestellten Kollision zunächst die Motorhaube angestellt werden. Neben der durch die Kollisionssensoren detektierten Kollision muss im Rahmen der Auslösebedingung für den Außenairbag jedoch zwangsläufig zusätzlich (zeitlich korreliert) das Ebenendurchbruchskriterium erfüllt sein, damit der Außenairbag aufgeblasen wird.In a particularly expedient embodiment of the present invention, it may be provided in this context that upon detection of a frontal collision by means of the further detection device, at least one safety system is triggered only when the level breakdown criterion is met. Thus, there is a plausibility check, in particular with regard to security systems acting in the area of the windshield. If, for example, a motor vehicle in a specific embodiment comprises an adjustable hood and a windshield outer airbag as safety systems, the hood can first be turned on when a collision is detected via collision sensors. In addition to the collision detected by the collision sensors, however, within the framework of the triggering condition for the outer airbag, the plane break-through criterion must inevitably additionally be fulfilled (in time correlation) so that the outer airbag is inflated.

Selbstverständlich sind auch andere Arten der Nutzung des Ebenendurchbruchskriteriums innerhalb der Auslösebedingen denkbar, so dass beispielsweise bei Erfüllung des Ebenendurchbruchskriteriums wenigstens ein Schwellwert eines die Messdaten der weiteren Erfassungseinrichtung betreffenden Kriteriums der Auslösebedingung zum leichteren Auslösen des Sicherheitssystems angepasst wird. In dieser Ausgestaltung wird das Ebenendurchbruchskriterium also zur weiteren Plausibilisierung dahingehend eingesetzt, dass Schwellwerte, die insbesondere des Auslösen des Sicherheitssystems in Abhängigkeit der Messdaten der weiteren Erfassungseinrichtung bestimmen, angepasst werden.Of course, other types of use of the layer breakdown criterion within the trigger conditions are also conceivable, so that, for example, upon fulfillment of the layer breakdown criterion, at least one threshold value of a criterion relating to the measurement data of the further detection device is adapted to the triggering of the safety system. In this refinement, the level breakdown criterion is therefore used for further plausibility checking in that threshold values which in particular determine the triggering of the security system as a function of the measurement data of the further detection device are adjusted.

Neben der Anpassung von Schwellwerten weiterer Kriterien und der ebenso bereits beschriebenen UND-Verknüpfung mit einem die Messdaten der weiteren Erfassungseinrichtung betreffenden Kriterium kann auch eine Auswertung der Messdaten der optischen Erfassungseinrichtung und der weiteren Erfassungseinrichtung zu einem gemeinsamen Kollisionswert erfolgen, welcher dann gegen ein das Ebenendurchbruchskriterium implizit umfassendes Kriterium ausgewertet wird und dergleichen.In addition to the adaptation of threshold values of further criteria and the AND operation also described above with a criterion relating to the measurement data of the further detection device, an evaluation of the measurement data of the optical detection device and the further detection device can be carried out to a common collision value, which then implicitly violates a plane breakdown criterion comprehensive criterion is evaluated and the like.

In weiterer Ausgestaltung der vorliegenden Erfindung kann vorgesehen sein, dass der vorbestimmte Abstand als eine maximale Überklapplänge einer Leitbake über die Motorhaube (4) des Kraftfahrzeugs (1), ggf. unter Hinzufügung einer Sicherheitstoleranzlänge, ermittelt wird. Eine derartige Abschätzung der Lage des „virtuellen Vorhangs” hat sich als besonders nützlich erwiesen, um insbesondere Objekte, die die Motorhaube überragend überklappen, dann jedoch zurückschnellen, auszuschließen. Aus diese Weise können insbesondere auch häufig problematische Objekte wie Leitbaken, Pfosten und Objekte, die kleiner als die Motorhaube sind, als Auslösungsgrund ausgeschlossen werden.In a further embodiment of the present invention can be provided that the predetermined distance as a maximum Überklapplänge a Leitbake on the hood ( 4 ) of the motor vehicle ( 1 ), if necessary with the addition of a safety tolerance length. Such an estimate of the location of the "virtual curtain" has proved to be particularly useful, in particular to exclude objects that overwhelm the hood, but then snap back. In this way, problematic objects such as beacons, posts and objects, which are smaller than the hood, can often be excluded as a cause for triggering.

In weiterer Ausgestaltung der vorliegenden Erfindung kann vorgesehen sein, dass die optische Erfassungseinrichtung im Bereich einer Windschutzscheibe des Kraftfahrzeugs angeordnet ist, insbesondere am oberen Rand der Windschutzscheibe und/oder im Inneren des Kraftfahrzeugs. Beispielsweise kann vorgesehen werden, die optische Erfassungseinrichtung in Fahrtrichtung des Kraftfahrzeugs gerichtet in einem Rückspiegel oder einer Rückspiegelhalterung vorzusehen, jedoch sind auch sonstige, insbesondere zentrale Einbauorte am oberen Rand der Windschutzscheibe denkbar. Auch andere Verbauorte im Bereich der Windschutzscheibe sind jedoch möglich, beispielsweise an den A-Säulen, in den Außenspiegeln und dergleichen. Grundsätzlich ist auch eine Verbauung an der Motorhaube denkbar, beispielsweise windschutzscheibenseitig, während allgemein ein Verbau im Frontbereich des Kraftfahrzeugs vermieden werden sollte, da die Vertikalebene sonst nicht sinnvoll erfasst werden kann. Dabei sei an dieser Stelle noch darauf hingewiesen, dass sich der Erfassungsbereich der dreidimensionalen optischen Erfassungseinrichtung im Wesentlichen durch die Ausdehnung des zu überwachenden Abschnitts der Vertikalebene, also des eigentlichen „virtuellen Vorhangs”, ergibt, wobei gegebenenfalls eine geeignete Optik eingesetzt werden kann, um auch Kollisionsobjekte, die eher am seitlichen Rand der Motorhaube oberhalb dieser auftreten, zu detektieren. Idealerweise ist der Erfassungsbereich dabei so gewählt, dass ohnehin keine seitlich neben der Motorhaube die Vertikalebene durchbrechenden Objekte detektiert werden, was ansonsten im allgemeinen Fall durch eine entsprechende Algorithmik ausgeschlossen wird, das bedeutet, dass Kriterium umfasst die Überprüfung, ob sich das die Vertikalebene durchbrechende Objekt oberhalb der Motorhaube des Kraftfahrzeugs befindet.In a further embodiment of the present invention can be provided that the optical detection device is arranged in the region of a windshield of the motor vehicle, in particular at the upper edge of the windshield and / or in the interior of the motor vehicle. For example, it may be provided to provide the optical detection device directed in the direction of travel of the motor vehicle in a rearview mirror or rearview mirror mount, but other, in particular central installation locations on the upper edge of the windshield are conceivable. However, other locations in the windscreen are possible, for example, on the A-pillars, in the exterior mirrors and the like. In principle, an obstruction on the hood is conceivable, for example, windshield side, while generally a shoring in the front of the vehicle should be avoided, since the vertical plane can not otherwise be detected meaningful. It should be pointed out at this point that the detection range of the three-dimensional optical detection device essentially results from the extent of the section of the vertical plane to be monitored, ie the actual "virtual curtain", it also being possible to use a suitable optical system Collision objects, which occur rather on the lateral edge of the hood above this to detect. Ideally, the detection range is chosen so that anyway no laterally adjacent to the hood the vertical plane through the objects are detected, which is otherwise excluded in the general case by a corresponding algorithm, which means that criterion includes checking whether the vertical plane breaking object located above the hood of the motor vehicle.

Im Rahmen der vorliegenden Erfindung kann auch vorgesehen sein, dass die Messdaten der optischen Erfassungseinrichtung weitergehend genutzt werden, auch im Rahmen des Fußgängerschutzsystems. So ist es beispielsweise möglich, weitere, insbesondere plausibilisierende, auf die Messdaten der optischen Erfassungseinrichtung bezogene Kriterien in Auslösebedingungen zu berücksichtigen. Als besonders vorteilhaft hat es sich dabei erwiesen, wenn die und/oder eine weitere Auslösebedingung als zusätzliches Kriterium ein die Überschreitung eines Höhenschwellwerts durch wenigstens eine aus den Messdaten der optischen Erfassungseinrichtung bestimmte Höhe eines Kollisionsobjekts auswertendes Höhenkriterium umfasst. Auf diese Weise kann, insbesondere auch bereits vorausschauend, auch die Höhe eines Kollisionsobjekts berücksichtigt werden, welche sich aufgrund der dreidimensionalen Information der Messdaten der optischen Erfassungseinrichtung leicht ermitteln lässt. Ein solches Höhenkriterium lässt sich besonders vorteilhaft dazu einsetzen, Schwellwerte weiterer, insbesondere auf Messdaten der weiteren Erfassungseinrichtung bezogener Kriterien anzupassen, mithin durch eine Schwellwertanpassung zu plausibiliseren. So kann beispielsweise ein Sicherheitssystem leichter ausgelöst werden, das bedeutet, die Auslösungsschwelle kann herabgesetzt werden, wenn festgestellt wurde, dass das Kollisionsobjekt kleiner als die Motorhaube ist, so dass beispielsweise als Höhenschwellwert die Höhe eines ausgezeichneten Punktes der Motorhaube des Kraftfahrzeugs über dem Boden gewählt werden kann, insbesondere eines vorderen Endes der Motorhaube.In the context of the present invention, it can also be provided that the measurement data of the optical detection device are used further, also within the framework of the pedestrian protection system. Thus, it is possible, for example, to consider further, in particular plausibilizing criteria relating to the measurement data of the optical detection device in triggering conditions. It has proved to be particularly advantageous if the and / or a further triggering condition comprises, as an additional criterion, a height criterion evaluating the exceeding of a height threshold by at least one height of a collision object determined from the measurement data of the optical detection device. In this way, the amount of a collision object, which can be easily determined on the basis of the three-dimensional information of the measurement data of the optical detection device, can also be taken into account, in particular already with foresight. Such a height criterion can be used particularly advantageously to adapt threshold values of further criteria, in particular those related to measurement data of the further detection device, and thus by a Threshold adjustment to plausibiliseren. Thus, for example, a safety system can be triggered more easily, that is to say the triggering threshold can be lowered if it has been determined that the collision object is smaller than the bonnet, so that, for example, the altitude threshold is selected to be the height of an excellent point of the motor vehicle's bonnet above the ground can, in particular a front end of the hood.

In weiterer vorteilhafter Ausgestaltung der vorliegenden Erfindung kann vorgesehen sein, dass aus den Messdaten der optischen Erfassungseinrichtung auch ein Kollisionsobjekttyp ermittelt und zur Anpassung wenigstens eines Kriteriums der Auslösebedingung verwendet wird. In dieser Ausgestaltung werden die Messdaten der optischen Erfassungseinrichtung mithin auch über die den virtuellen Vorhang und gegebenenfalls die Höhe von Objekten hinaus weitergehend ausgewertet, beispielsweise, um eine Klassifikation von möglichen oder tatsächlichen Kollisionsobjekten zu ermöglichen und mithin eine weitere Plausibilisierungsebene zu schaffen, indem beispielsweise überprüft wird, ob ein Kollisionsobjekt ein Fußgänger ist. Eine derartige Abschätzung kann selbstverständlich bereits deutlich vor dem tatsächlichen Kollisionseintritt geschehen, indem beispielsweise ständig das Vorfeld des Kraftfahrzeugs überwacht wird.In a further advantageous embodiment of the present invention, it can be provided that a collision object type is also determined from the measured data of the optical detection device and used to adapt at least one criterion of the triggering condition. In this refinement, the measurement data of the optical detection device are therefore also evaluated further beyond the virtual curtain and possibly the height of objects, for example in order to allow a classification of possible or actual collision objects and thus to create a further plausibility level, for example by checking whether a collision object is a pedestrian. Of course, such an estimation can already take place well before the actual occurrence of the collision, for example by constantly monitoring the apron of the motor vehicle.

Auch Warnhinweise und dergleichen können mithin aus den Daten der optischen Erfassungseinrichtung abgeleitet werden, welche selbstverständlich ihre Messdaten grundsätzlich auch anderen Fahrzeugsystemen des Kraftfahrzeugs, die diese auswerten können, zur Verfügung stellen kann, beispielsweise auf die Längs- oder Querführung bezogenen Fahrerassistenzsystemen und dergleichen. Wird, wie beschrieben wurde, ein Kollisionsobjekttyp ermittelt, kann dieser auch zur Anpassung wenigstens eines Kriteriums der Auslösebedingung verwendet werden, indem beispielsweise Schwellwerte, insbesondere auch der Höhenschwellwert, in Abhängigkeit von dem Kollisionsobjekttyp angepasst werden können und dergleichen.It is therefore also possible to derive warning notices and the like from the data of the optical detection device, which of course can also provide its measured data to other vehicle systems of the motor vehicle which can evaluate them, for example to driver assistance systems relating to the longitudinal or lateral guidance and the like. If, as has been described, a collision object type is determined, this can also be used to adapt at least one criterion of the triggering condition, for example by adjusting threshold values, in particular also the altitude threshold, depending on the collision object type and the like.

Als Sicherheitssystem kann, wie bereits erwähnt, wenigstens eine anstellbare Motorhaube und/oder ein Windschutzscheiben-Außenairbag in Abhängigkeit der oder jeweils einer Auslösebedingung ausgelöst werden. Diese Beispiele für Sicherheitssysteme wurden bereits einleitend ausführlich beschrieben. Während des bezüglich des Höhenkriteriums sowohl bei einer anstellbaren Motorhaube als auch bei einem Windschutzscheiben-Außenairbag sinnvoll ist, dieses in den jeweiligen Auslösebedingungen bzw. einer gemeinsamen Auslösebedingung zu berücksichtigen, nachdem das Höhenkriterium insbesondere bei wie beschrieben geeigneter Wahl des Höhenschwellwerts besonders dazu geeignet ist, abzuschätzen, ob ein Kollisionsobjekt überhaupt auf die Motorhaube bzw. Windschutzscheibe des Kraftfahrzeugs weiterbewegt wird, eignet sich die Berücksichtigung des Ebenendurchbruchskriteriums besonders zur Berücksichtigung bei der Auslösung des Windschutzscheiben-Außenairbags.As a safety system, as already mentioned, at least one adjustable hood and / or a windscreen outer airbag can be triggered as a function of or in each case one triggering condition. These examples of safety systems have already been described in detail in the introduction. While it makes sense in relation to the height criterion both in a engagable hood and in a windshield outer airbag to consider this in the respective trigger conditions or a common trigger condition, especially after the height criterion is particularly suitable for estimating the height threshold value as described suitable whether a collision object is ever moved on to the hood or windshield of the motor vehicle, the consideration of the level breakdown criterion is particularly suitable for consideration in the triggering of the windshield outer airbag.

Neben dem Verfahren betrifft die vorliegende Erfindung auch ein Kraftfahrzeug, umfassend eine optische Erfassungseinrichtung, wenigstens ein Sicherheitssystem und ein Fußgängerschutzsystem zur Unfallschwereminderung bei Frontalkollisionen mit Fußgängern, welches ein zur Durchführung des erfindungsgemäßen Verfahrens ausgebildetes Steuergerät umfasst. Zur Kommunikation zwischen der optischen Erfassungseinrichtung und gegebenenfalls weiterer Erfassungseinrichtungen und dem Steuergerät kann dabei beispielsweise ein übliches Bussystem eines Kraftfahrzeugs, beispielsweise ein CAN-Bus, vorgesehen sein. Sämtliche Ausführungen bezüglich des erfindungsgemäßen Verfahrens lassen sich analog auf das erfindungsgemäße Kraftfahrzeug übertragen, mit welchem mithin dieselben Vorteile erreicht werden können.In addition to the method, the present invention also relates to a motor vehicle, comprising an optical detection device, at least one safety system and a pedestrian protection system for accident severity in frontal collisions with pedestrians, which comprises a control device designed for carrying out the method according to the invention. For communication between the optical detection device and optionally further detection devices and the control device, for example, a conventional bus system of a motor vehicle, such as a CAN bus, may be provided. All statements relating to the method according to the invention can be analogously transferred to the motor vehicle according to the invention, with which therefore the same advantages can be achieved.

Weitere Vorteile und Einzelheiten der vorliegenden Erfindung ergeben sich aus den im Folgenden beschriebenen Ausführungsbeispielen sowie anhand der Zeichnung. Dabei zeigen:Further advantages and details of the present invention will become apparent from the embodiments described below and with reference to the drawing. Showing:

1 eine Prinzipskizze eines erfindungsgemäßen Kraftfahrzeugs, 1 a schematic diagram of a motor vehicle according to the invention,

2 eine Aufsicht auf die Motorhaube des Kraftfahrzeugs, 2 a view of the hood of the motor vehicle,

3 eine Skizze zur Ermittlung des Abstands der Vertikalebene vom vorderen Ende des Kraftfahrzeugs, 3 a sketch for determining the distance of the vertical plane from the front end of the motor vehicle,

4 eine erste schematische Seitenansicht des erfindungsgemäßen Kraftfahrzeugs bezüglich des virtuellen Vorhangs 4 a first schematic side view of the motor vehicle according to the invention with respect to the virtual curtain

5 eine zweite schematische Seitenansicht des erfindungsgemäßen Kraftfahrzeugs bezüglich der Objekthöhe und 5 a second schematic side view of the motor vehicle according to the invention with respect to the object height and

6 einen Ablaufplan eines Ausführungsbeispiels des erfindungsgemäßen Verfahrens. 6 a flowchart of an embodiment of the method according to the invention.

1 zeigt eine Prinzipskizze eines erfindungsgemäßen Kraftfahrzeugs 1, genauer des vorderen Teils eines erfindungsgemäßen Kraftfahrzeugs 1. Dieses weist einen Stoßfänger 2 an seinem Frontend 3 auf. An das Frontend 3 schließt, wie grundsätzlich bekannt eine Motorhaube 4 an, die im Wesentlichen bis zu einer Windschutzscheibe 5 reicht. 1 shows a schematic diagram of a motor vehicle according to the invention 1 , More precisely, the front part of a motor vehicle according to the invention 1 , This has a bumper 2 at his frontend 3 on. To the frontend 3 closes, as basically known a bonnet 4 which is essentially up to a windshield 5 enough.

Um Frontalkollisionen mit einem Fußgänger möglichst in ihrer Schwere mindern zu können, weist das Kraftfahrzeug 1 ein Fußgängerschutzsystem 6 mit einem Steuergerät 7 auf, das Messdaten verschiedener Erfassungseinrichtungen 8, 9 auswertet, um bei Erfüllung einer Auslösebedingung Sicherheitssysteme 10, 11 des Kraftfahrzeugs 1 auszulösen, wobei hier jedem der Sicherheitssysteme 10, 11 eine eigene Auslösebedingung zugeordnet ist. In order to reduce head collisions with a pedestrian as possible in their severity, the motor vehicle has 1 a pedestrian protection system 6 with a control unit 7 on, the measurement data of various detection devices 8th . 9 evaluates safety systems to meet a triggering condition 10 . 11 of the motor vehicle 1 here triggering each of the security systems 10 . 11 a separate trigger condition is assigned.

Als dreidimensionale optische Erfassungseinrichtung 8 ist im vorliegenden Ausführungsbeispiel eine PMD-Kamera 12 vorgesehen. Als weitere Erfassungseinrichtung 9, die auf einem unterschiedlichen Messprinzip basiert, sind im Bereich des Stoßfängers 2 verschiedene Kollisionssensoren 13 angeordnet, die bei Kontakt mit einem Kollisionsobjekt entsprechende Messdaten liefern.As a three-dimensional optical detection device 8th is a PMD camera in the present embodiment 12 intended. As another detection device 9 , which is based on a different measuring principle, are in the area of the bumper 2 different collision sensors 13 arranged, which provide corresponding measurement data on contact with a collision object.

Als Sicherheitssysteme 10, 11 sind vorliegend zum einen eine anstellbare Motorhaube 4 mit entsprechenden Aktuatoren 14 sowie ein Windschutzscheiben-Außenairbag 15 vorgesehen. Bei Auslösen des Sicherheitssystems 10 wird die Motorhaube 4 wie durch die Position 4' angedeutet angestellt, bei Auslösen des Sicherheitssystems 11 wird der Außenairbag 15 zu der Form 15' derart aufgeblasen, dass die Windschutzscheibe 5 durch ihn überdeckt wird. Mithin wird ein Fußgänger, der über die Motorhaube 4 weiter in Richtung der Windschutzscheibe 5 bewegt wird, durch die angestellte Motorhaube 4 und den Außenairbag 15' abgefangen, so dass die Unfallfolgen gemindert werden.As security systems 10 . 11 In the present case, on the one hand, there is an adjustable bonnet 4 with corresponding actuators 14 and a windshield exterior airbag 15 intended. When the safety system is triggered 10 becomes the hood 4 as by the position 4 ' indicated employed, when triggering the security system 11 becomes the outside airbag 15 to the form 15 ' so inflated that the windshield 5 is covered by him. Thus, a pedestrian is over the hood 4 continue towards the windscreen 5 is moved by the hired hood 4 and the outside airbag 15 ' intercepted, so that the consequences of accidents are reduced.

Das Steuergerät 7 ist nun dazu ausgebildet, das erfindungsgemäße Verfahren auszuführen, das bedeutet, es werden durch das Steuergerät 7 die Daten der PMD-Kamera 12 derart ausgewertet, dass eine im Rahmen eines Ebenendurchbruchkriteriums überprüft wird, ob eine die Motorhaube 4 entlang einer Linie schneidende Vertikalebene durch das Kollisionsobjekt oberhalb der Motorhaube 4 durchbrochen wird. Die Vertikalebene wirkt also als eine Art „virtueller Vorhang”.The control unit 7 is now adapted to carry out the method according to the invention, that is, it is by the control unit 7 the data of the PMD camera 12 evaluated such that one is checked in the context of a level breakdown criterion, whether the hood 4 Vertical plane crossing a line through the collision object above the hood 4 is broken. The vertical plane thus acts as a kind of "virtual curtain".

2 zeigt eine Aufsicht auf die Motorhaube 4 und den vorderen Bereich des Kraftfahrzeugs 1, wobei der Verlauf der Vertikalebene anhand der Linie 16, die den Schnitt mit der Motorhaube 4 bildet, deutlich erkennbar ist. Dargestellt ist auch der durch einen Winkel α beschriebene Erfassungsbereich 17 der am oberen Ende der Windschutzscheibe 5 im Inneren des Kraftfahrzeugs 1, insbesondere an einem Rückspiegel oder einer Rückspiegelhalterung, angeordneten PMD-Kamera 12, die ersichtlich die Vertikalebene in ihrer gesamten relevanten Breite erfasst. Ereignisse neben der Motorhaube 4, vergleiche gestrichelte Linien 18, werden dabei ausgefiltert, so sie überhaupt im Erfassungsbereich liegen. Nachdem die PMD-Kamera 12 auch eine Tiefeninformation, also eine Entfernungsinformation, für jedes Pixel liefert, kann eine Durchbrechung der Vertikalebene leicht ermittelt werden. 2 shows a view of the hood 4 and the front portion of the motor vehicle 1 , where the course of the vertical plane based on the line 16 making the cut with the hood 4 is clearly visible. Shown is also the detection range described by an angle α 17 the at the top of the windshield 5 inside the motor vehicle 1 , in particular on a rearview mirror or a rearview mirror mount, arranged PMD camera 12 which can be seen to capture the vertical plane in its entire relevant width. Events next to the hood 4 , compare dashed lines 18 , are filtered out if they are even within the detection range. After the PMD camera 12 Also provides a depth information, so a distance information, for each pixel, an opening of the vertical plane can be easily determined.

Ersichtlich ist die Vertikalebene um einen Abstand d, Bezugszeichen 19, von dem vorderen Ende des Kraftfahrzeugs 1 beabstandet. Der Abstand 19 ist hierbei so gewählt, dass eine überklappende Standard-Leitbake 20 die Vertikalebene nicht mehr durchdringt, wie durch die Prinzipskizze der 3 näher dargestellt werden soll.As can be seen, the vertical plane is a distance d, reference numeral 19 , from the front end of the motor vehicle 1 spaced. The distance 19 is chosen so that an overflowing standard Leitbake 20 the vertical plane no longer penetrates, as through the schematic diagram of the 3 should be shown in more detail.

Ersichtlich klappt auch die Leitbake 20 ein Stück über die Motorhaube 4, bevor sie, Pfeil 21, wieder zurückschnellt. Der Abstand 19 ist nun so gewählt, dass eine Standard-Leitbake 20 in keinem Fall die hier auch in vertikaler Richtung ersichtliche Vertikalebene 22 durchdringt und dennoch noch, unter Berücksichtigung von Verarbeitungs- und Latenzzeiten, nach einer detektierten Durchdringung der Vertikalebene 22 der Außenairbag 15 rechtzeitig ausgelöst werden kann. Vorliegend weist die PMD-Kamera 12 eine Erfassungsrate von 200 Hz auf, so dass sogar zwei zeitlich aufeinanderfolgende Ereignisse ausgewertet werden können, um Messfehler in einzelnen Pixeln auszuschließen. Es sei an dieser Stelle noch angemerkt, dass das Ebenendurchbruchskriterium, nachdem ein Fußgänger eine gewisse Ausdehnung aufweist, auch das Durchdringen der Vertikalebene 22 an mehreren Stellen, also Pixeln, als Überprüfung umfassen kann.The Leitbake works well, too 20 a piece over the hood 4 before you, arrow 21 , back down again. The distance 19 is now chosen so that a standard beacon 20 in no case the here also in the vertical direction apparent vertical plane 22 permeates and yet still, considering processing and latency, after a detected penetration of the vertical plane 22 the outside airbag 15 can be triggered on time. In the present case, the PMD camera points 12 a detection rate of 200 Hz, so that even two temporally consecutive events can be evaluated to exclude measurement errors in individual pixels. It should also be noted at this point that the level breakdown criterion, after a pedestrian has a certain extent, also the penetration of the vertical plane 22 in several places, so pixels, as a review may include.

4 zeigt zur näheren Erläuterung nun noch schematisch, wie bei einer Frontalkollision mit einem Fußgänger 23 dieser auf die Motorhaube 4 überklappt und somit die Vertikalebene 22 als virtuellen Vorhang durchdringt. 4 shows for a more detailed explanation now, as in a frontal collision with a pedestrian 23 this on the hood 4 flips over and thus the vertical plane 22 penetrates as a virtual curtain.

Im vorliegenden Ausführungsbeispiel wird zusätzlich im Rahmen der Gesamtansteuerung auch ein Höhenkriterium aufgrund von Messdaten der optischen Erfassungseinrichtung 8 ausgewertet und im Rahmen zumindest der Auslösebedingung für die anstellbare Motorhaube 4 berücksichtigt, wobei aufgrund der ja auch die Entfernungsinformation enthaltenden Messdaten eine Höhe eines Kollisionsobjekts bestimmt und mit einem Höhenschwellwert verglichen wird.In addition, in the present exemplary embodiment, a height criterion based on measured data of the optical detection device is additionally used in the context of the overall control 8th evaluated and in the context of at least the triggering condition for the engagable bonnet 4 takes into account, due to the yes also the distance information containing measurement data determines a height of a collision object and compared with a height threshold.

Genaues ist hierbei der Prinzipskizze der 5 zu entnehmen, welche das Kraftfahrzeug 1 auf einer Straße 24 fahrend zeigt. Die Situation ist kurz vor einer Kollision mit einem Fußgänger 23 dargestellt. Der Fußgänger 23 befindet sich ersichtlich im Erfassungsbereich 17 der PMD-Kamera 12. Nachdem diese nun auch Entfernungsinformationen liefert und die Gesamtgeometrie sowie die Position der PMD-Kamera 12 bekannt sind, kann die Höhe 25 des Fußgängers 23 als Kollisionsobjekt 26 aus den Messdaten der PMD-Kamera 12 bestimmt werden. Als Höhenschwellwert zur Erfüllung des Höhenkriteriums ist dabei die Höhe 27 der vorderen Kante der Motorhaube 4 vorgesehen, das bedeutet, es wird überprüft, ob das Kollisionsobjekt 26 die Motorhaube 4 überragt.Exactly here is the sketch of the principle 5 to see which the motor vehicle 1 on a street 24 driving shows. The situation is close to collision with a pedestrian 23 shown. The pedestrian 23 is visible in the detection area 17 the PMD camera 12 , Now that also provides distance information and the overall geometry and position of the PMD camera 12 are known, the height can 25 of the pedestrian 23 as a collision object 26 from the measured data of the PMD camera 12 be determined. When Height threshold for meeting the height criterion is the height 27 the front edge of the hood 4 provided, that means it will check if the collision object 26 the hood 4 surmounted.

Die PMD-Kamera 12 ist dafür in einer hervorragenden Position angeordnet, nachdem sie sich am oberen Rand der Windschutzscheibe 5 im Inneren des Kraftfahrzeugs 1 befindet. Erst bei der tatsächlichen Kollision sprechen dann die Kollisionssensoren 13 an.The PMD camera 12 It is arranged in an excellent position after being at the top of the windscreen 5 inside the motor vehicle 1 located. Only in the actual collision then speak the collision sensors 13 at.

6 zeigt nun, wie in einem Ausführungsbeispiel des erfindungsgemäßen Verfahrens das Ebenendurchbruchskriterium und das Höhenkriterium innerhalb der Auslösebedingungen berücksichtigt werden kann. Dabei sei an dieser Stelle noch angemerkt, dass im dargestellten Ausführungsbeispiel des erfindungsgemäßen Verfahrens die Messdaten der PMD-Kamera 12 ohnehin ständig ausgewertet werden, um im Vorfeld des Kraftfahrzeugs 1 befindliche Objekte klassifizieren zu können, so dass die grundsätzliche Klassifikation eines Kollisionsobjekts 26 als Fußgänger 23 bereits einen Einfluss auf im Rahmen der Auslösebedingungen berücksichtigte Schwellwerte hat. 6 now shows how, in one embodiment of the method according to the invention, the level breakdown criterion and the height criterion can be taken into account within the triggering conditions. It should be noted at this point that in the illustrated embodiment of the method according to the invention, the measurement data of the PMD camera 12 anyway to be evaluated constantly in order to advance the motor vehicle 1 To be able to classify located objects, so that the basic classification of a collision object 26 as a pedestrian 23 already has an influence on threshold values taken into account in the context of the triggering conditions.

Die Messdaten 28 der PMD-Kamera 12 werden zunächst anhand des Höhenkriteriums 29 ausgewertet. Ist dieses erfüllt, Pfeil 30, werden Schwellwerte eines die Messdaten 31 der Kollisionssensoren 13 auswertenden Kriteriums 32 so angepasst, dass eine Auslösung, Schritt 33, des Sicherheitssystems 10, also der anstellbaren Motorhaube 4, wahrscheinlicher wird, das bedeutet, die Schwelle für eine Auslösung des Sicherheitssystems 10 wird gesenkt. Das Höhenkriterium 29 dient mithin zur plausibilisierenden Anpassung des Kriteriums 32.The measured data 28 the PMD camera 12 be first on the basis of the height criterion 29 evaluated. Is this fulfilled, arrow 30 , Thresholds become one of the measured data 31 the collision sensors 13 evaluative criterion 32 adjusted so that a trigger, step 33 , the security system 10 , so the adjustable hood 4 It is more likely, that is, the threshold for a release of the security system 10 is lowered. The height criterion 29 serves therefore to plausibilizing adaptation of the criterion 32 ,

Nur dann, wenn eine Kollision detektiert wurde, mithin die Motorhaube 4 angestellt wurde (Schritt 27), werden die Messdaten 28 der PMD-Kamera 12 weiter ausgewertet, um im Rahmen des Ebenendurchbruchskriteriums 34 zu ermitteln, ob das Kollisionsobjekt 26 übergeklappt ist und die Vertikalebene 22, den virtuellen Vorhang, durchdringt, wie oben bereits näher erläutert. Gegebenenfalls kann auch hier bereits eine Anpassung aufgrund des Höhenkriteriums 29 oder eine Klassifikation vorgenommen worden sein, so dass beispielsweise eine größere oder kleinere Pixelzahl ausreicht, um das Kriterium 34 zu erfüllen, wenn ein zu der Kollision zeitkorrelierter Durchbruch erfolgt.Only if a collision has been detected, hence the bonnet 4 was hired (step 27 ), the measurement data become 28 the PMD camera 12 further evaluated to within the scope of the layer breakdown criterion 34 to determine if the collision object 26 is folded over and the vertical plane 22 , the virtual curtain, penetrates, as already explained in more detail above. If necessary, an adaptation based on the altitude criterion can already be made here as well 29 or a classification has been made so that, for example, a larger or smaller number of pixels is sufficient to the criterion 34 when a collision-time-related breakthrough occurs.

Letztlich sind also das Kriterium 32 und das Ebenendurchbruchskriterium 34 hier UND-verknüpft, um in einem Schritt 35 bei Erfüllung der Gesamtauslösebedingung auch das Sicherheitssystem 11, den Außenairbag, auszulösen.So in the end, that's the criterion 32 and the level breakdown criterion 34 here AND-linked to in one step 35 if the overall triggering condition is fulfilled, the safety system as well 11 to trigger the outside airbag.

Es sind auch andere Verknüpfungen von Kriterien 29, 32, 34 innerhalb der verschiedenen, gegebenenfalls, wie hier, teilüberlappenden Auslösebedingungen denkbar.There are also other links of criteria 29 . 32 . 34 within the various, optionally, as here, partially overlapping trigger conditions conceivable.

Insgesamt ermöglicht es das erfindungsgemäße Verfahren, Fehlauslösungen durch Objekte wie Leitbaken, fliegende Plastiktüten, Vögel und dergleichen deutlich zu reduzieren.Overall, the inventive method makes it possible to significantly reduce false triggering by objects such as beacons, flying plastic bags, birds and the like.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • DE 102005012136 A1 [0003] DE 102005012136 A1 [0003]
  • DE 10013563 A1 [0003] DE 10013563 A1 [0003]
  • DE 102007029987 B4 [0003] DE 102007029987 B4 [0003]
  • DE 102005012357 A1 [0003] DE 102005012357 A1 [0003]
  • DE 102005006763 A1 [0007] DE 102005006763 A1 [0007]

Claims (10)

Verfahren zum Betrieb eines Fußgängerschutzsystems (6) zur Unfallschwereminderung bei Frontalkollisionen mit Fußgängern (23) in einem Kraftfahrzeug (1), wobei wenigstens ein Sicherheitssystem (10, 11) in Abhängigkeit wenigstens einer Auslösebedingung, die Messdaten (28, 31) wenigstens einer Erfassungseinrichtung (8, 9) auswertet, ausgelöst wird, dadurch gekennzeichnet, dass die Auslösebedingung ein in Abhängigkeit von Messdaten (28) einer dreidimensionalen optischen Erfassungseinrichtung (8) ausgewertetes Ebenendurchbruchskriterium (34) umfasst, worin überprüft wird, ob ein Kollisionsobjekt (26) eine die Motorhaube (4) des Kraftfahrzeugs (1) entlang einer einen vorbestimmten Abstand (19) zum vorderen Ende des Kraftfahrzeugs (1) aufweisenden Linie (16) schneidende Vertikalebene (22) durchbricht.Method for operating a pedestrian protection system ( 6 ) to reduce the accident severity in frontal collisions with pedestrians ( 23 ) in a motor vehicle ( 1 ), whereby at least one security system ( 10 . 11 ) as a function of at least one triggering condition, the measured data ( 28 . 31 ) at least one detection device ( 8th . 9 ), is triggered, characterized in that the triggering condition depends on measured data ( 28 ) of a three-dimensional optical detection device ( 8th ) evaluated level breakdown criterion ( 34 ), in which it is checked whether a collision object ( 26 ) one the hood ( 4 ) of the motor vehicle ( 1 ) along a predetermined distance ( 19 ) to the front end of the motor vehicle ( 1 ) line ( 16 ) intersecting vertical plane ( 22 ) breaks through. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass im Rahmen der Auslösebedingung Messdaten (28, 31) von wenigstens zwei auf unterschiedlichen Prinzipien basierenden Erfassungseinrichtungen (8, 9), insbesondere der optischen Erfassungseinrichtung (8) und wenigstens eines bei Berührung mit einem Kollisionsobjekt (26) ansprechenden Kollisionssensors (13), ausgewertet werden.A method according to claim 1, characterized in that in the context of the trigger condition measurement data ( 28 . 31 ) of at least two detection devices based on different principles ( 8th . 9 ), in particular the optical detection device ( 8th ) and at least one upon contact with a collision object ( 26 ) responsive collision sensor ( 13 ), be evaluated. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass bei Detektion einer Frontalkollision mittels der weiteren Erfassungseinrichtung (9) wenigstens ein Sicherheitssystem (10, 11) nur bei Erfüllung des Ebenendurchbruchskriteriums (34) ausgelöst wird.Method according to Claim 2, characterized in that upon detection of a frontal collision by means of the further detection device ( 9 ) at least one security system ( 10 . 11 ) only if the level breakdown criterion ( 34 ) is triggered. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass der vorbestimmte Abstand (19) als eine maximale Überklapplänge einer Leitbake (20) über die Motorhaube (4) des Kraftfahrzeugs (1), ggf. unter Hinzufügung einer Sicherheitstoleranzlänge, ermittelt wird.Method according to one of the preceding claims, characterized in that the predetermined distance ( 19 ) as a maximum overlap length of a beacon ( 20 ) over the hood ( 4 ) of the motor vehicle ( 1 ), if necessary with the addition of a safety tolerance length. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass als optische Erfassungseinrichtung (8) eine PMD-Kamera (12) verwendet wird.Method according to one of the preceding claims, characterized in that as an optical detection device ( 8th ) a PMD camera ( 12 ) is used. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass die optische Erfassungseinrichtung (8) im Bereich einer Windschutzscheibe (5) des Kraftfahrzeugs (1) angeordnet ist, insbesondere am oberen Rand der Windschutzscheibe (5) und/oder im Inneren des Kraftfahrzeugs (1).Method according to one of the preceding claims, characterized in that the optical detection device ( 8th ) in the area of a windscreen ( 5 ) of the motor vehicle ( 1 ) is arranged, in particular at the upper edge of the windshield ( 5 ) and / or inside the motor vehicle ( 1 ). Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass die und/oder eine weitere Auslösebedingung als zusätzliches Kriterium ein die Überschreitung eines Höhenschwellwerts durch wenigstens eine aus den Messdaten (28) der optischen Erfassungseinrichtung (8) bestimmte Höhe (25) eines Kollisionsobjekts (26) auswertendes Höhenkriterium (29) umfasst.Method according to one of the preceding claims, characterized in that the and / or a further trigger condition as an additional criterion, the exceeding of a height threshold by at least one of the measured data ( 28 ) of the optical detection device ( 8th ) certain height ( 25 ) of a collision object ( 26 ) evaluating height criterion ( 29 ). Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass aus den Messdaten (28) der optischen Erfassungseinrichtung (8) auch ein Kollisionsobjekttyp ermittelt und zur Anpassung wenigstens eines Kriteriums (29, 32, 34) der Auslösebedingung verwendet wird.Method according to one of the preceding claims, characterized in that from the measured data ( 28 ) of the optical detection device ( 8th ) also determines a collision object type and to adapt at least one criterion ( 29 . 32 . 34 ) of the triggering condition is used. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass als Sicherheitssystem (10, 11) wenigstens eine anstellbare Motorhaube (4) und/oder ein Windschutzscheiben-Außenairbag (15) in Abhängigkeit der das Ebenendurchbruchskriterium (34) umfassenden Auslösebedingung ausgelöst werden.Method according to one of the preceding claims, characterized in that as security system ( 10 . 11 ) at least one engagable hood ( 4 ) and / or a windshield outer airbag ( 15 ) depending on the layer breakdown criterion ( 34 ) trigger condition. Kraftfahrzeug (1), umfassend eine optische Erfassungseinrichtung (8), wenigstens ein Sicherheitssystem (10, 11) und ein Fußgängerschutzsystem (6) zur Unfallschwereminderung bei Frontalkollisionen mit Fußgängern (23) mit einem zur Durchführung eines Verfahrens nach einem der vorangehenden Ansprüche ausgebildeten Steuergerät (7).Motor vehicle ( 1 ), comprising an optical detection device ( 8th ), at least one security system ( 10 . 11 ) and a pedestrian protection system ( 6 ) to reduce the accident severity in frontal collisions with pedestrians ( 23 ) with a control device designed for carrying out a method according to one of the preceding claims ( 7 ).
DE102012000789.2A 2012-01-17 2012-01-17 Method for operating a pedestrian protection system and motor vehicle Expired - Fee Related DE102012000789B4 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102012000789.2A DE102012000789B4 (en) 2012-01-17 2012-01-17 Method for operating a pedestrian protection system and motor vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102012000789.2A DE102012000789B4 (en) 2012-01-17 2012-01-17 Method for operating a pedestrian protection system and motor vehicle

Publications (2)

Publication Number Publication Date
DE102012000789A1 true DE102012000789A1 (en) 2013-07-18
DE102012000789B4 DE102012000789B4 (en) 2018-08-30

Family

ID=48693057

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102012000789.2A Expired - Fee Related DE102012000789B4 (en) 2012-01-17 2012-01-17 Method for operating a pedestrian protection system and motor vehicle

Country Status (1)

Country Link
DE (1) DE102012000789B4 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014171863A1 (en) * 2013-04-17 2014-10-23 Autoliv Development Ab System for controlling the deployment of an external safety device
DE102013212092B4 (en) 2013-06-25 2024-01-25 Robert Bosch Gmbh Method and device for operating a pedestrian protection device of a vehicle, pedestrian protection device

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10013563A1 (en) 2000-03-21 2001-10-04 Acts Gmbh & Co Kg Vehicle safety system for protecting pedestrians has reversible safety device activated by first activated sensor near front fender; subsequently operated sensor is near leading edge of hood
WO2003029839A1 (en) 2001-09-27 2003-04-10 Conti Temic Microelectronic Gmbh Method for three-dimensional recording of objects or scenes
DE10355344A1 (en) 2003-11-25 2005-06-23 Conti Temic Microelectronic Gmbh Device and method for impact protection in a motor vehicle
DE102005012357A1 (en) 2004-03-18 2005-10-06 Denso Corp., Kariya Pedestrian e.g. kid, protecting device for e.g. estate car, has height adjustment units to lower front and rear sections of vehicle when pedestrian collision signal is produced by control unit, so that pedestrian is protected by airbag
DE102005012136A1 (en) 2004-03-17 2005-10-13 Toyoda Gosei Co., Ltd., Nishikasugai Pedestrian airbag system
DE102006038003A1 (en) 2005-08-16 2007-03-01 Denso Corp., Kariya Pedestrian protection device for vehicle, has pedestrian collision determination unit determining whether collision between vehicle and pedestrian is occurred or not based on measured detection parameter of obstacle
DE102007029987B4 (en) 2007-06-28 2009-05-07 Daimler Ag Vehicle with a front hood which can be erected during a pedestrian impact
DE10141730B4 (en) 2001-08-25 2009-09-03 Conti Temic Microelectronic Gmbh Method for protecting living objects in the event of a collision with a vehicle, and a vehicle with a control device for carrying out the method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005006763A1 (en) 2005-02-15 2006-08-24 Robert Bosch Gmbh Method and device for object recognition

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10013563A1 (en) 2000-03-21 2001-10-04 Acts Gmbh & Co Kg Vehicle safety system for protecting pedestrians has reversible safety device activated by first activated sensor near front fender; subsequently operated sensor is near leading edge of hood
DE10141730B4 (en) 2001-08-25 2009-09-03 Conti Temic Microelectronic Gmbh Method for protecting living objects in the event of a collision with a vehicle, and a vehicle with a control device for carrying out the method
WO2003029839A1 (en) 2001-09-27 2003-04-10 Conti Temic Microelectronic Gmbh Method for three-dimensional recording of objects or scenes
DE10355344A1 (en) 2003-11-25 2005-06-23 Conti Temic Microelectronic Gmbh Device and method for impact protection in a motor vehicle
DE102005012136A1 (en) 2004-03-17 2005-10-13 Toyoda Gosei Co., Ltd., Nishikasugai Pedestrian airbag system
DE102005012357A1 (en) 2004-03-18 2005-10-06 Denso Corp., Kariya Pedestrian e.g. kid, protecting device for e.g. estate car, has height adjustment units to lower front and rear sections of vehicle when pedestrian collision signal is produced by control unit, so that pedestrian is protected by airbag
DE102006038003A1 (en) 2005-08-16 2007-03-01 Denso Corp., Kariya Pedestrian protection device for vehicle, has pedestrian collision determination unit determining whether collision between vehicle and pedestrian is occurred or not based on measured detection parameter of obstacle
DE102007029987B4 (en) 2007-06-28 2009-05-07 Daimler Ag Vehicle with a front hood which can be erected during a pedestrian impact

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014171863A1 (en) * 2013-04-17 2014-10-23 Autoliv Development Ab System for controlling the deployment of an external safety device
WO2014171871A1 (en) * 2013-04-17 2014-10-23 Autoliv Development Ab System for controlling the deployment of an external safety device
DE102013212092B4 (en) 2013-06-25 2024-01-25 Robert Bosch Gmbh Method and device for operating a pedestrian protection device of a vehicle, pedestrian protection device

Also Published As

Publication number Publication date
DE102012000789B4 (en) 2018-08-30

Similar Documents

Publication Publication Date Title
EP2617605B1 (en) Method for operating a pedestrian protection system
DE102013212092B4 (en) Method and device for operating a pedestrian protection device of a vehicle, pedestrian protection device
EP2470407B1 (en) Monitoring device and method for monitoring an entry or exit area of an access opening of a vehicle to a building component
DE102016226040A1 (en) Method and device in a motor vehicle for pedestrian protection
WO2005110816A1 (en) Pedestrian protection system for a motor vehicle
DE102011101009A1 (en) Device for protecting vehicle i.e. small car, against e.g. side collision, has crash element that is coupled with driving apparatus and extendable before or during collision of vehicle based on current speed of vehicle
DE102005005959B4 (en) Device and method for controlling a safety device of a vehicle
DE102016201522A1 (en) Method for reducing the risk of collision, safety system and vehicle
DE102012107188B4 (en) Procedure for activating protective measures in vehicles when a hazardous situation is detected
DE102008008746A1 (en) Operator protection system of motor vehicle, has operator protection device and activation device for activating operator protection device, where activation device has two sensors that are spatially separated from each other
EP1689621B1 (en) Device for controlling pedestrian protection means
DE102012000789B4 (en) Method for operating a pedestrian protection system and motor vehicle
DE102013210769A1 (en) Tripping device for triggering a personal protection device for a vehicle and method for operating a triggering device for triggering a personal protection device for a vehicle
DE102016226047A1 (en) Method and device in a motor vehicle for pedestrian protection
DE102011118658A1 (en) Method for controlling protection system of vehicle e.g. passenger car, involves evaluating the expansion of collision object, collision velocity and collision coverage based on image data and output result of sensor
EP3600973B1 (en) Device for triggering an external protection function
DE102004012550B4 (en) Pedestrian protection system and method for protecting pedestrians
DE102013212477A1 (en) Method and device for operating a motor vehicle, computer program product
DE102004006196A1 (en) Protection system for road user like pedestrians has vehicle-linked protection devices for detecting the geometrical parameters of road users
EP1687182B1 (en) Impact protection device and method for a motor vehicle
DE102014016579B4 (en) Method for operating a driver assistance system after an accident and a motor vehicle
DE102012009672A1 (en) Vehicle i.e. car, has bumper unit with sensor system designed as T-shaped hose, and pressure sensor arranged in hose aperture for acquisition of pressure change in inner space of hose caused by collision of bumper unit
DE102016223961A1 (en) Method and triggering circuit for triggering an arranged in a steering wheel of a motor vehicle airbags
DE102013021346B4 (en) Method for operating a safety system of a motor vehicle and motor vehicle
EP1731375B1 (en) Method for classifying a collision event

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R016 Response to examination communication
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee