DE102005025963A1 - Object detecting method for motor vehicle, involves detecting reflections of all individual rays on seat of motor vehicle as common image by common receiver and evaluating brightness of local reflections of rays within image - Google Patents

Object detecting method for motor vehicle, involves detecting reflections of all individual rays on seat of motor vehicle as common image by common receiver and evaluating brightness of local reflections of rays within image Download PDF

Info

Publication number
DE102005025963A1
DE102005025963A1 DE102005025963A DE102005025963A DE102005025963A1 DE 102005025963 A1 DE102005025963 A1 DE 102005025963A1 DE 102005025963 A DE102005025963 A DE 102005025963A DE 102005025963 A DE102005025963 A DE 102005025963A DE 102005025963 A1 DE102005025963 A1 DE 102005025963A1
Authority
DE
Germany
Prior art keywords
reflections
image
seat
motor vehicle
local
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102005025963A
Other languages
German (de)
Inventor
Georg Dipl.-Ing. Kunert
Stefan Rathgeb
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Conti Temic Microelectronic GmbH
Original Assignee
Conti Temic Microelectronic GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Conti Temic Microelectronic GmbH filed Critical Conti Temic Microelectronic GmbH
Priority to DE102005025963A priority Critical patent/DE102005025963A1/en
Publication of DE102005025963A1 publication Critical patent/DE102005025963A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512Passenger detection systems
    • B60R21/0153Passenger detection systems using field detection presence sensors
    • B60R21/01538Passenger detection systems using field detection presence sensors for image processing, e.g. cameras or sensor arrays
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/04Systems determining the presence of a target

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mechanical Engineering (AREA)
  • Air Bags (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

The method involves adjusting individual rays on a seat of a motor vehicle, and directing locally limited illuminations on the seat area. Reflections of all the individual rays on the seat are detected as a common image by a common receiver. Brightness of the local reflections of the rays within the image is evaluated. A position of the brightness maxima is evaluated, and a distance between the brightness maxima is evaluated. Independent claims are also included for the following: (1) an object detecting system for interior of a motor vehicle for detecting an object on a seat of the motor vehicle (2) a motor vehicle with an object detecting system.

Description

Die Erfindung betrifft ein Verfahren zur Erfassung von Objekten auf dem Sitz eines Fahrzeugs gemäß dem Oberbegriff von Anspruch 1.The The invention relates to a method for detecting objects the seat of a vehicle according to the preamble of claim 1.

Es wird nicht zuletzt zur Erfüllung der US-amerikanischen Gesetzeslage (FMVSS 208) seit langem ein sog. OCS-Sensor (Occupant Classifikation System) zur Insassen-Belegungserkennung und ein OOP-Sensor (Out of Position) zur Positionserkennung des Kopfes entwickelt. Ziel ist es, die durch Airbagauslösung verursachten Verletzungen des Insassen zu minimieren. Es existieren zahlreiche Lösungsstrategien für diese Problemstellung. Dabei kann die Szenerie über Feldsensoren (kapazitiv, resistiv), Ultraschallsensoren oder optische Sensoren (aktiv, passiv) erfasst werden.It is not least to fulfillment US law (FMVSS 208) has long been a so-called Occupant classification system (OCS) sensor for occupant occupancy detection and an OOP sensor (Out of Position) for detecting the position of the Head developed. The aim is to cause the airbag deployment To minimize injury to the occupant. There are many solving strategies for this Problem. In doing so, the scenery can be monitored by field sensors (capacitive, resistive), ultrasonic sensors or optical sensors (active, passive) be recorded.

Die 2dimensionale Erfassung beispielsweise mittels entsprechender Graubildkameras erfordert eine sehr gleichmäßige Beleuchtung ohne störendes Aussenlicht, um Objekte exakt erkennen zu können. Daher kommen auch dort oft aktiv beleuchtete Systeme im nichtsichtbaren Wellenlängenbereich zum Einsatz.The 2-dimensional detection, for example by means of corresponding gray-scale cameras requires a very uniform lighting without disturbing outside light, to recognize objects exactly. Therefore often there are also actively illuminated systems in the non-visible Wavelength range for use.

Das Funktionsprinzip aktiver optischer Sensorsysteme lässt sich weiterhin grob unterteilen in 2-dimensionale (2D) und 3-dimensionale (3D) Erfassung. 3D-Erfassung kann nach dem Prinzip der Triangulation, Licht-Laufzeitmesssung bzw. Licht-Phasenmessung oder Stereoverfahren erfolgen.The Function principle of active optical sensor systems can be continue to roughly divide into 2-dimensional (2D) and 3-dimensional (3D) acquisition. 3D capture can after the Principle of triangulation, light transit time measurement or light phase measurement or stereo method.

Die 3D-Erfassung unter Berücksichtigung der Entfernung der Objekte ermöglicht eine qualitativ hochwertigere Bewertung als 2D-Bilder vergleichbarer Auflösung, ist jedoch deutlich aufwendiger.The 3D capture taking into account the Removal of objects allows a higher quality rating than 2D images comparable Resolution, However, it is much more complicated.

Bei der Entfernungsmessung nach dem Triangulationsverfahren wird für jeden diskreten Strahl über die Verschiebung am Empfänger auf die Entfernung zum Objekt geschlossen. Wird am Empfänger ein Intensitätsverlauf gemessen, wird die intensitätsreichste Stelle als jeweilige korrespondierende Verschiebung gewählt. Nach diesem Verfahren wird meist ein eindimensionaler Entfernungsvektor ermittelt.at The distance measurement according to the triangulation method will be for everyone discrete beam over the shift at the receiver closed to the distance to the object. Will be on the receiver intensity curve measured, is the most intense Digit selected as the respective corresponding displacement. To This method is usually a one-dimensional distance vector determined.

Bei Ermittlung der 3D-Information nach dem Prinzip der Licht-Laufzeit bzw. Licht-Phasenmessung belichtet der Sensor ein Raumsegment vor dem AB-Modul diffus mit hochfrequent moduliertem Infrarotlicht. Dies wird vom Insassen und der Fahrzeugstruktur reflektiert und vom Sensor wieder empfangen. Die rückgestreute Phasenfront des HF-modulierten Lichts enthält die vollständige Tiefeninformation innerhalb ihrer lokalen Verzögerung. Die eingestrahlte Wellenfront wird korreliert mit einem entsprechend modulierten elektrischen Feld innerhalb jedes Pixels. Als Ergebnis liefern die Pixel ein quasistationäres HF-Interferenzmuster.at Determination of the 3D information according to the principle of the light transit time or light phase measurement, the sensor exposes a space segment the AB module diffuse with high-frequency modulated infrared light. This is reflected by the occupant and the vehicle structure and received by the sensor again. The backscattered phase front of the Contains RF-modulated light the complete Depth information within their local delay. The irradiated wavefront is correlated with a correspondingly modulated electrical Field within each pixel. As a result, the pixels deliver quasi-stationary RF interference pattern.

Das Prinzip ist daher dem Prinzip der RF-Modulationsinterferometrie (RFMI) ähnlich. Aus der Phasenbeziehung zwischen der Senderansteuerung und dem empfangenen Licht lässt sich somit der Abstand der Remissionsfläche ableiten.The The principle is therefore the principle of RF modulation interferometry (RFMI) similar. From the phase relationship between the transmitter drive and the received one Leaves light thus derive the distance of the remission surface.

Beim klassischen Stereoverfahren werden in der Regel zwei Kameras gegeneinander versetzt angeordnet. Miteinander korrespondierende Bildpunkte im linken und rechten Stereobild werden identifiziert. Nahe Gegenstände im Bildfeld sich sehr stark gegeneinander verschoben, weiter entfernte hingegen kaum. Aus diesen Verschiebungen, Disparitäten genannt, können die Distanzen der Objekte berechnet werden. Ausgabe des Sensors ist somit ein Muster, welches weiterverarbeitet wird. Ein Klassifikationsalgorithmus liefert die momentane Belegungsklasse bzw. die Kopfposition.At the Classic stereo methods are usually two cameras against each other staggered. Corresponding pixels in the Left and right stereo image are identified. Close objects in the image field moved very strongly against each other, however far away hardly. From these shifts, called disparities, the Distances of the objects are calculated. Output of the sensor is thus a pattern, which is further processed. A classification algorithm returns the current occupancy class or head position.

Die Mustergewinnung nach dem Triangulationsverfahren ist sehr robust und beansprucht wenige Ressourcen. Es wird neben einen kleinen μC eine LED-Zeile (z.B. 10 LED) und ein Ein-Zeilen-Bildsensor benötigt. Ein gravierender Nachteil ist jedoch der ermittelte eindimensionale Entfernungsvektor. Der Informationsgehalt dieses Musters ist sehr gering. Der nachgeschaltete Klassifikationsalgorithmus ist häufig nicht in der Lage, kleine Änderungen (z.B. Verdrehung eines Kindersitzes), richtig zu interpretieren. Verwechslungen mit anderen Belegungsklassen sind die Folge.The Pattern extraction by the triangulation method is very robust and takes up few resources. It will be next to a small μC an LED line (e.g., 10 LEDs) and a one-line image sensor needed. A serious disadvantage, however, is the determined one-dimensional Range vector. The information content of this pattern is very much low. The downstream classification algorithm is often not able to make small changes (e.g., twisting a child seat) to interpret correctly. confusion with other occupancy classes are the result.

Ein mehrdimensionaler Entfernungsvektor (Remissionsmatrix) beinhaltet mehr Information. Die Klassifikationsalgorithmen haben somit mehr Information zur Verfügung, für die richtige Entscheidung. Bei „guten" Mustern, sind nahezu keine Verwechslungen mehr vorhanden. Allerdings befinden sich die momentan verfügbaren 3D-Sensoren im frühen Entwicklungsstadium. Die aufgenommenen Muster sind sehr verrauscht, temperatur- und remissionsabhängig. Zusätzlich existiert eine Abhängigkeit von der Intensität des Umgebungslichts. Der Systempreis (Sender und Empfänger) ist ebenfalls noch sehr hoch.One multidimensional distance vector (remission matrix) more information. The classification algorithms thus have more Information available for the right decision. In "good" patterns, are almost there are no more mistakes. However, they are currently available 3D sensors in the early Development. The recorded patterns are very noisy, temperature- and remission-dependent. additionally there is a dependency from the intensity the ambient light. The system price (sender and receiver) is also very high.

Beim Stereoverfahren sorgen physikalische Gegebenheiten, insbesondere Beleuchtungsvariationen, aber auch Verdeckungen, Sensorrauschen sowie unterschiedliche Kamera-Charakteristiken, optische Verzerrungen, unterschiedliche Blendenöffnungen, etc., dass sich die Helligkeitsverteilungen der beiden Stereobilder in der Regel deutlich voneinander unterscheiden. Suchalgorithmen, welche die Bildpunkte im linken und rechten Bild einander zuordnen sollen, müssen deshalb extrem fehlertolerant sein. Diese Algorithmen sind extrem rechenaufwendig und müssen oft in einem FPGA integriert werden.In the stereo method, physical conditions, in particular illumination variations, but also occlusions, sensor noise as well as different camera characteristics, optical distortions, different apertures etc., ensure that the brightness distributions of the two stereo images generally differ significantly from each other. Search algorithms which assign the pixels in the left and right image to each other must therefore be extremely fault-tolerant. These algorithms are extremely computationally expensive and often have to be integrated into an FPGA.

Auch hier ist der Systempreis (einfacher Sender aber zwei Kamera-Chips mit je einer Empfangsoptik) ebenfalls sehr hoch.Also here is the system price (simple transmitter but two camera chips each with a receiving optics) also very high.

Die Aufgabe der vorliegenden Erfindung ist es daher, ein Verfahren der eingangs genannten Art vorzustellen, welches äußerst kostengünstig zu realisieren ist und dennoch eine gute Objekterkennungsgenauigkeit aufweist.The Object of the present invention is therefore to provide a method of to introduce the aforementioned type, which is extremely cost-effective realize and yet a good object recognition accuracy having.

Diese Aufgabe wird durch die Merkmale der unabhängigen Ansprüche gelöst. Vorteilhafte Weiterbildungen der Erfindung ergeben sind aus den Unteransprüchen, wobei auch Kombinationen und Weiterbildungen einzelner Merkmale miteinander denkbar sind.These The object is solved by the features of the independent claims. advantageous Developments of the invention will become apparent from the dependent claims, wherein also combinations and developments of individual features with each other are conceivable.

Ein wesentlicher Gedanke der Erfindung besteht darin, dass gerade nicht die komplette Szenerie mit einem diffusen Licht möglichst gleichmäßig beleuchtet wird, wie dies für herkömmliche Systeme üblich ist, sondern gezielt eine lokal begrenzte, also quasi punktuelle Beleuchtung durch eine Mehrzahl von Einzelstrahlen erzeugt wird, wobei jedoch die Reflexionen aller Einzelstrahlen von einem Sitz von einem gemeinsamen Empfänger als ein gemeinsames Bild erfasst werden, so daß die Reflexionen entsprechend gemeinsam und in örtlicher wie amplitudenmäßiger Relation zueinander sowie im Bild als einen aufgenommenes Bildmuster ausgewertet werden können.One essential idea of the invention is that just not the complete scenery with a diffused light possible evenly lit. will, as for conventional Systems usual is, but specifically a locally limited, so quasi punctual Illumination is produced by a plurality of individual beams, however, the reflections of all individual rays from a seat from a common receiver be captured as a common image, so that the reflections accordingly together and in local like amplitude relation evaluated to each other and in the image as a recorded image pattern can be.

Die Position und Helligkeit der einzelnen Reflexionen ist dabei deutlich einfacher auswertbar als bspw. konventionelle Grauwertbilder. Zudem ermöglichen Helligkeit und/oder Position der lokalen Helligkeitsmaxima innerhalb des Bildes ähnlich wie 3dimensionale Bilder Rückschlüsse auf die Entfernung des aufgenommenen Punktes und damit den Sitzbelegungszustand einschließlich der Position des Insassen, dessen Kopfes oder anderer Parameter. Zudem lassen sich auf diese Muster lokaler Helligkeitsmaxima deutlich einfachere Mustererkennungsalgorithmen anwenden.The Position and brightness of the individual reflections is clear easier to evaluate than, for example, conventional grayscale images. moreover enable Brightness and / or position of the local brightness maxima within similar to the picture like 3dimensional images inferences the distance of the recorded point and thus the seat occupancy state including the position of the occupant, his head or other parameter. moreover can be clearly seen on these patterns of local maximum brightness apply simpler pattern recognition algorithms.

Die Erfindung wird nun nachfolgend anhand eines Ausführungsbeispieles unter Zuhilfenahme der Figuren näher erläutert. Im Folgenden können für funktional gleiche und/oder gleiche Elemente mit den gleichen Bezugsziffern bezeichnet sein. Es zeigenThe Invention will now be described below with reference to an embodiment with the aid closer to the figures explained. In the following you can for functional same and / or same elements with the same reference numerals be designated. Show it

1: Objekterfassungsvorrichtung mit einer Beleuchtungsvorrichtung, die eine Mehrzahl von Einzelstrahlen mit lokal begrenzter Beleuchtung des Sitzbereichs bzw. darauf befindlicher Objekte erzeugt, und einem gemeinsamen Empfänger 2 1 : Object detection device comprising a lighting device that generates a plurality of individual beams with locally limited illumination of the seat area or objects thereon, and a common receiver 2

2: Hardwaretechnische Varianten der Ausgestaltung der Beleuchtungsvorrichtung bspw. als LED-Zeilen oder Power-LED mit optischem Gitter zur Aufspaltung in die Einzelstrahlen 2 : Hardware technical variants of the design of the lighting device, for example, as LED lines or power LED with optical grating for splitting into the individual beams

3: skizzenhafte Darstellung von zwei typischen Sitzbelegungsstrukturen und dabei entstehenden Bildmustern der lokalen Beleuchtungsflecken, deren Gesamtmuster im Bild bzw. deren Helligkeit und/oder Position im Bild und/oder Verteilung zueinander ausgewertet werden 3 Sketch-like representation of two typical seat occupancy structures and resulting image patterns of the local illumination spots whose overall pattern in the image or its brightness and / or position in the image and / or distribution are evaluated to each other

4: Skizze des Blockaufbaus eines Objekterkennungssystems 4 : Sketch of the block construction of an object recognition system

5: Skizze eines solchen Mustervergleichs 5 : Sketch of such a pattern comparison

1 zeigt ein Objekterkennungssystem für den Innenraum von Kraftfahrzeugen. Es ist eine Beleuchtungsvorrichtung 1 zur Erzeugung einer Mehrzahl von Einzelstrahlen 101, 102, ... sowie 201, 202, ... vorgesehen, die auf einen Sitz im Fahrzeug gerichtet sind und zu einer lokal begrenzten Beleuchtung führen, wie dies anhand der einzelnen Leuchtflecken skizziert wird. 1 shows an object recognition system for the interior of motor vehicles. It is a lighting device 1 for generating a plurality of individual beams 101 . 102 , ... such as 201 . 202 , ..., which are directed to a seat in the vehicle and lead to a localized lighting, as outlined by the individual light spots.

Die Beleuchtung erfolgt also quasi punktuell, d.h. es wird vorzugsweise eine kollimierende Optik verwendet, wie in 4 skizzenhaft angedeutet, so daß eine Divergenz des Einzelstrahls von kleiner 10 Grad, vorzugsweise ca. 1 Grad entsteht. Bei dem in diesen Anwendungsbereichen üblichen Entfernungsbereich von 50 cm bis 1 m werden so Leuchtfleckendurchmesser von ca. 1 cm bis 2cm erreicht, wobei als Leuchtflecken die zusammenhängende Bereiche mit einer einen bestimmten Schwellwert übersteigenden Helligkeitswert zu verstehen sind. Die Einzelstrahlen weisen vorzugsweise zueinander einen Winkelabstand von 8 bis 10 Grad auf, d.h. die Leuchtflecken sind bei 1 m Entfernung ca 14cm bis 17cm voneinander entfernt. Dadurch entsteht in der Abbildung der Reflexionen ein deutlich einfacheres Bildmuster mit dennoch ausreichender Signifikanz, wie nachfolgend noch näher erläutert wird.The illumination thus takes place quasi-selectively, ie it is preferably used a collimating optics, as in 4 sketchy hinted, so that a divergence of the single beam of less than 10 degrees, preferably about 1 degree is formed. With the distance range of 50 cm to 1 m, which is customary in these areas of application, spot diameters of approximately 1 cm to 2 cm are achieved, the luminescent spots being the coherent areas having a brightness value exceeding a specific threshold value. The individual beams preferably have an angular distance of 8 to 10 degrees to each other, ie the spots are at 1 m distance about 14cm to 17cm apart. This results in the image of the reflections a much simpler image pattern with sufficient significance, as will be explained in more detail below.

Mit einem gemeinsamen Empfänger 2 werden die Reflexionen aller Einzelstrahlen von einem Sitzbereich als ein gemeinsames Bild erfasst, d.h. die Sitzbelegung und ggfs. Position und Halterung der Insassen auf dem Sitz wird in einem Abbildungsmuster dieser lokalen Leuchtflecken erfasst.With a common receiver 2 the reflections of all the individual beams are detected by a seating area as a common image, ie the seat occupancy and, if necessary, position and position of the occupants on the seat are detected in an imaging pattern of these local light spots.

4 skizziert in einem Blockschema den Gesamtaufbau. Die 2 zeigt hardwaretechnische Varianten der Ausgestaltung der Beleuchtungsvorrichtung 1 bspw. als LED-Zeilen 1.1 und 1.2 oder als je eine Power-LED 1.3 je Reihe mit einem optischem Gitter 1.4 zur Aufspaltung in die Einzelstrahlen (vgl. dazu auch noch 3). skizzenhaft ist auch der Empfänger als logarithmischer Bildaufnahmechip mit einem 120dB Dynamikbereich und einer CIF Auflösung (350×280 Pixel) skizziert. Dies ist selbstverständlich nur beispielhaft, insbesondere Anzahl der Reihen und Leuchtflecken sowie Auslösung des Empfängers variabel. Der Bildaufnahmechip kann grundsätzlich auch noch für andere Anwendungen genutzt werden, bspw. normale passive Grauwertbilder der Szene erfassen. 4 outlined in a block diagram the overall structure. The 2 shows hardware technical Variants of the embodiment of the lighting device 1 eg as LED lines 1.1 and 1.2 or as ever a power LED 1.3 each row with an optical grating 1.4 for the splitting into the single rays (compare to this also 3 ). the receiver is sketched as a logarithmic image acquisition chip with a 120dB dynamic range and a CIF resolution (350 × 280 pixels). This is of course only an example, in particular number of rows and spots and triggering the receiver variable. The image acquisition chip can basically also be used for other applications, for example, capture normal passive gray value images of the scene.

Darüber hinaus skizziert 2 eine bevorzugte Ausgestaltung, bei die Beleuchtungsvorrichtung für eine Gruppe von Einzelstrahlen, hier eine Reihe, eine gemeinsame Lichtquelle 1.3 sowie ein optisches Gitter 1.4 zur Aufspreizung in die Einzelstrahlen aufweist.In addition outlined 2 a preferred embodiment, in the lighting device for a group of individual beams, here a row, a common light source 1.3 as well as an optical grid 1.4 has to spread in the individual jets.

Dank der lokal begrenzten Beleuchtung mit Einzelstrahlen entsteht gegenüber dem klassischen Grauwertbild ein deutlich einfacher auswertbares Leuchtfleckenmuster.thanks the localized lighting with single beams is compared to the classic gray value image a clearly easier to evaluate light spot pattern.

Mit zunehmendem Abstand von der Beleuchtungsvorrichtung nehmen die Helligkeit im lokalen Maximum ab sowie die Größe der Leuchtflecken zu. Die räumliche Ausdehnung der Objekte ist also auswertbar.With increasing distance from the lighting device take the brightness in the local maximum and the size of the spots too. The spatial Extension of the objects is therefore evaluable.

Darüber hinaus verändert sich durch Objekte im Sitzbereich die Verteilung der Leuchtflecken im Bild und damit das gesamte Bildmuster. Insbesondere verschieben sich die Position der lokalen Helligkeitsmaxima (Punkt 101 definiert durch seine x-y-Position x(101) und /y(101)) innerhalb des Bildes sowie die Abstände zwischen den lokalen Helligkeitsmaxima (x(101)-x(102), y(101)-y(102))) ...) untereinander.In addition, objects in the seating area change the distribution of the light spots in the image and thus the entire image pattern. In particular, the position of the local brightness maxima (point 101 defined by its xy position x (101) and / y (101)) within the image as well as the distances between the local brightness maxima (x (101) -x (102), y (101) -y (102))). ..) among themselves.

Die 3 zeigt nun anhand zweier typischer Sitzbelegungszustände

  • a) Reboard-, also gegen die Fahrtrichtung gerichteter Kindersitz
  • b) Unfallbedingt vorverlagerter Insasse
The 3 now shows on the basis of two typical seat occupancy states
  • a) Reboard, so directed against the direction of travel child seat
  • b) accidentally displaced occupant

Die entstehenden Bildmuster, die einerseits deutlich die im Bildmuster tatsächlich lokal begrenzten Reflexionen und andererseits deren Signifikanz für diese Situationen zeigen.The resulting image patterns, on the one hand clearly in the image pattern indeed localized reflections and their significance for them Show situations.

Es ist nun möglich, einzelne dieser vom Belegungszustand einschließlich konkreter Lage und Halterung der Objekte abhängigen Größen selektiv zu bewerten.It is now possible single of these occupancy state including concrete location and fixture dependent on the objects Sizes selectively rate.

Wie 5 nochmal veranschaulicht, können sowohl Helligkeitsunterschiede zwischen den Sollwerten (als weiße Kreise dargestellt) mit den Istwerten (dunkle Kreise) hinsichtlich der Stärke, hier dargestellt aus Durchmessergröße sowie der Position, vorzugsweise der lokalen Helligkeitsmaxima, im Bild, also bzgl. der x-y-Koordinate oder eine Solllinie (hier gestrichelt dargestellt) oder die Abstände der Leuchtflecken relativ zueinander bewertet werden.As 5 illustrated again, both brightness differences between the setpoints (shown as white circles) with the actual values (dark circles) in terms of strength, shown here from the diameter size and the position, preferably the local maximum brightness, in the image, ie with respect to the xy coordinate or a target line (shown here in dashed lines) or the distances of the light spots are evaluated relative to each other.

Besonders bevorzugt erfolgt aber eine Gesamtbewertung des aufgenommenen Bildmusters mittels Mustererkennungsverfahren, wie einem Polynomklassifikator, indem ein Vergleich mit gespeicherten Mustern für typische Sitzbelegungs- und Insassensituationen erfolgt. Dabei werden inhärent die Bilder ebenfalls hinsichtlich Helligkeit (z) und/oder Position (x, y) der lokalen Reflexionen mit den Mustern ausgewertet.Especially but preferably an overall evaluation of the recorded image pattern by means of Pattern recognition method, such as a polynomial classifier, by a comparison with stored patterns for typical seat occupancy and Occupant situations occur. In doing so, the images are inherent as well Brightness (z) and / or position (x, y) of the local reflections evaluated with the patterns.

Vorzugsweise ist für einen Sitz eine Mehrzahl von Einzelstrahlen so ausgerichtet, dass im Bild der Reflexionen eine x/y-Matrix aus mehreren Reihen 10n 20n mit jeweils mehreren lokalen Reflexionen entsteht.Preferably is for a seat a plurality of individual beams aligned so that in the image of the reflections, an x / y matrix of several rows 10n 20n, each with multiple local reflections arises.

Ein derartiges Objekterkennungssystem eignet sich für Sitze in Fahrzeugen sowie in anderen Objekten und wird zur Regelung von Anwendungen verwendet, die sitzbelegungs- und/oder insassenpositionsabhängig sind, wie beispielweise die Auslösung von Insassenschutzeinrichtungen, die andererseits aber hinsichtlich der Detailgenauigkeit mit den hier durch die Leuchtflecken deutlich reduzierten Bildmerkmalen noch auskommen, wobei die Anzahl der Einzelstrahlen natürlich situationsabhängig anpassbar ist und insbesondere neben kontinuierlichen Abständen der Einzelstrahlen und Leuchtflecken auch ganz gezielt bestimmte Zonen des Sitzbereichs beleuchtet werden können, um möglichst signifikante Bildmuster für eine einfache Mustererkennung zu erhalten.One Such object recognition system is suitable for seats in vehicles as well in other objects and is used to control applications the seat occupancy and / or occupant position are dependent, such as the triggering of Occupant protection devices, on the other hand, however, with regard to the level of detail with the here by the light spots clearly reduced pictorial features still get along, with the number of single rays Naturally depending on the situation is customizable and in particular, in addition to continuous intervals of Single rays and spots also specifically targeted zones of the seating area can be illuminated to maximize significant image patterns for one to get easy pattern recognition.

Claims (11)

Verfahren zur Erfassung von Objekten auf einem Sitz eines Fahrzeugs, wobei der Sitzbereich beleuchtet und die dabei auftretenden Reflexionen ausgewertet werden, dadurch gekennzeichnet, daß eine Mehrzahl von Einzelstrahlen (101, 102, 103, ...) auf einen Sitz im Fahrzeug gerichtet sind und zu einer lokal begrenzten Beleuchtung führen und die Reflexionen aller Einzelstrahlen von einem Sitz von einem gemeinsamen Empfänger (2) als ein gemeinsames Bild erfasst werden.Method for detecting objects on a seat of a vehicle, wherein the seating area is illuminated and the reflections occurring are evaluated, characterized in that a plurality of individual beams ( 101 . 102 . 103 , ...) are directed to a seat in the vehicle and lead to a localized illumination and the reflections of all individual beams from a seat of a common receiver ( 2 ) as a common image. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daß Muster für typische Sitzbelegungs- und Insassensituationen gespeichert sind und das aufgenommene Bildmuster hinsichtlich Helligkeit (z) und/oder Position (x, y) der lokalen Reflexionen mit den Mustern verglichen wird.A method according to claim 1, characterized in that patterns are stored for typical Sitzbelegungs- and occupant situations and the recorded image pattern in terms of brightness (z) and / or position (x, y) of the local reflections with compared to the patterns. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, daß die Helligkeit (z(101), z(102), ...) der lokalen Reflexionen innerhalb des Bildes bewertet wird.Method according to one of the preceding claims, characterized characterized in that Brightness (z (101), z (102), ...) of the local reflections within the Image is rated. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, daß die Position der lokalen Helligkeitsmaxima (x(101)/y(101), x(102)/Y(102), ...) innerhalb des Bildes bewertet wird.Method according to one of the preceding claims, characterized characterized in that Position of the local brightness maxima (x (101) / y (101), x (102) / Y (102), ...) is evaluated within the picture. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, daß die Abstände zwischen den lokalen Helligkeitsmaxima (x(101)-x(102), y(101)-y(102))) ...) bewertet werden.Method according to one of the preceding claims, characterized characterized in that Distances between the local brightness maxima (x (101) -x (102), y (101) -y (102))) ...) be rated. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, daß für einen Sitz eine Mehrzahl von Einzelstrahlen so ausgerichtet sind, dass im Bild der Reflexionen eine Matrix (x, y) aus mehreren Reihen (10n, 20n) mit jeweils mehreren lokalen Reflexionen entsteht. Method according to one of the preceding claims, characterized characterized in that for a Seat a plurality of individual beams are aligned so that in the image of the reflections a matrix (x, y) of several rows (10n, 20n), each with a plurality of local reflections. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, daß ein Einzelstrahl eine Divergenz kleiner 10 Grad, vorzugsweise unter 2 Grad, aufweist und die Einzelstrahlen zueinander einen Winkelabstand von 5 bis 20 Grad, vorzugsweise 8 bis 10 Grad aufweisen.Method according to one of the preceding claims, characterized characterized in that a Single beam a divergence less than 10 degrees, preferably below 2 degrees, and the individual beams to each other an angular distance from 5 to 20 degrees, preferably 8 to 10 degrees. Objekterkennungssystem für den Innenraum von Kraftfahrzeugen zur Durchführung des Verfahrens nach einem der vorangehenden Ansprüche mit: – einer Beleuchtungsvorrichtung (1) zur Erzeugung einer Mehrzahl von Einzelstrahlen (101, 102, ...), die auf einen Sitz im Fahrzeug gerichtet sind und zu einer lokal begrenzten Beleuchtung führen, – einem gemeinsamen Empfänger (2), der die Reflexionen aller Einzelstrahlen von einem Sitz von als ein gemeinsames Bild erfasst.Vehicle interior object recognition system for carrying out the method according to one of the preceding claims, comprising: - a lighting device ( 1 ) for generating a plurality of individual beams ( 101 . 102 , ...), which are aimed at a seat in the vehicle and lead to a localized lighting, - a common receiver ( 2 ), which captures the reflections of all individual rays from a seat of as a common image. Objekterkennungssystem nach Anspruch 8, wobei die Beleuchtungsvorrichtung für eine Gruppe von Einzelstrahlen eine gemeinsame Lichtquelle (1.3) sowie ein optisches Gitter (1.4) zur Aufspreizung der Einzelstrahlen aufweist.An object recognition system according to claim 8, wherein the lighting device for a group of individual beams comprises a common light source ( 1.3 ) as well as an optical grating ( 1.4 ) for spreading the individual beams. Objekterkennungssystem nach Anspruch 8 oder 9, wobei die Beleuchtungsvorrichtung zumindest eine kollimierende Optik für die Einzelstrahlen aufweist.An object recognition system according to claim 8 or 9, wherein the illumination device has at least one collimating optics for the individual beams. Kraftfahrzeug mit einem Objekterkennungssystem nach einem der Ansprüche 8 bis 10.Motor vehicle with an object recognition system according to one of the claims 8 to 10.
DE102005025963A 2005-05-23 2005-06-03 Object detecting method for motor vehicle, involves detecting reflections of all individual rays on seat of motor vehicle as common image by common receiver and evaluating brightness of local reflections of rays within image Withdrawn DE102005025963A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102005025963A DE102005025963A1 (en) 2005-05-23 2005-06-03 Object detecting method for motor vehicle, involves detecting reflections of all individual rays on seat of motor vehicle as common image by common receiver and evaluating brightness of local reflections of rays within image

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102005024147.6 2005-05-23
DE102005024147 2005-05-23
DE102005025963A DE102005025963A1 (en) 2005-05-23 2005-06-03 Object detecting method for motor vehicle, involves detecting reflections of all individual rays on seat of motor vehicle as common image by common receiver and evaluating brightness of local reflections of rays within image

Publications (1)

Publication Number Publication Date
DE102005025963A1 true DE102005025963A1 (en) 2006-12-14

Family

ID=37439885

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102005025963A Withdrawn DE102005025963A1 (en) 2005-05-23 2005-06-03 Object detecting method for motor vehicle, involves detecting reflections of all individual rays on seat of motor vehicle as common image by common receiver and evaluating brightness of local reflections of rays within image

Country Status (1)

Country Link
DE (1) DE102005025963A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007032171A1 (en) 2007-07-10 2009-01-22 Key Safety Systems, Inc., Sterling Heights Device for detecting the occupancy state of a vehicle seat
WO2023210333A1 (en) * 2022-04-27 2023-11-02 株式会社アイシン Occupant detection device and occupant detection method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4400664A1 (en) * 1994-01-12 1995-08-03 Spies Martin Dipl Ing Fh Device for detecting seat occupancy in vehicles etc.
US5760885A (en) * 1994-12-04 1998-06-02 Seiko Epson Corporation Light-sensing device
US6049747A (en) * 1996-06-12 2000-04-11 Yazaki Corporation Driver monitoring device
DE10133386A1 (en) * 2001-07-10 2003-01-23 Bosch Gmbh Robert Detecting position of person in vehicle involves generating event signal if significant characteristics of detected person changes position by more than defined amount
US20030204363A1 (en) * 1999-03-01 2003-10-30 Griffin Dennis P. Infrared out-of-position detection system and method for a vehicle restraint system
US6757009B1 (en) * 1997-06-11 2004-06-29 Eaton Corporation Apparatus for detecting the presence of an occupant in a motor vehicle

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4400664A1 (en) * 1994-01-12 1995-08-03 Spies Martin Dipl Ing Fh Device for detecting seat occupancy in vehicles etc.
US5760885A (en) * 1994-12-04 1998-06-02 Seiko Epson Corporation Light-sensing device
US6049747A (en) * 1996-06-12 2000-04-11 Yazaki Corporation Driver monitoring device
US6757009B1 (en) * 1997-06-11 2004-06-29 Eaton Corporation Apparatus for detecting the presence of an occupant in a motor vehicle
US20030204363A1 (en) * 1999-03-01 2003-10-30 Griffin Dennis P. Infrared out-of-position detection system and method for a vehicle restraint system
DE10133386A1 (en) * 2001-07-10 2003-01-23 Bosch Gmbh Robert Detecting position of person in vehicle involves generating event signal if significant characteristics of detected person changes position by more than defined amount

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007032171A1 (en) 2007-07-10 2009-01-22 Key Safety Systems, Inc., Sterling Heights Device for detecting the occupancy state of a vehicle seat
DE102007032171B4 (en) * 2007-07-10 2009-09-17 Key Safety Systems, Inc., Sterling Heights Device for detecting the occupancy state of a vehicle seat
US8013727B2 (en) 2007-07-10 2011-09-06 Key Safety Systems, Inc. Device for detecting vehicle seat occupancy
WO2023210333A1 (en) * 2022-04-27 2023-11-02 株式会社アイシン Occupant detection device and occupant detection method

Similar Documents

Publication Publication Date Title
DE102006020192B4 (en) Apparatus and method for predicting collision
DE102006024979B4 (en) Method and apparatus for detecting the presence of an occupant within a vehicle
EP3729137B1 (en) Multi-pulse lidar system for multi-dimensional detection of objects
EP1933167B1 (en) Optoelectronic sensor and method for detecting and determining the distance of an object
EP3049823B1 (en) Method for controlling a micro-mirror scanner, and micro-mirror scanner
DE102010037744B3 (en) Optoelectronic sensor
DE102005030968B4 (en) Automatic mirror alignment method for a vehicle
EP2202533A1 (en) Logging device
EP1185442B1 (en) Device and method for monitoring seats by means of an optoelectronic triangulation technique
EP2772676A1 (en) 3D camera and method for three dimensional surveillance of a surveillance area
DE102010039092B4 (en) Method and control device for determining a distance between an object and a vehicle
WO2011045277A1 (en) Camera system
EP2184616A2 (en) Method and device for controlling a radiation source
EP3311190A1 (en) Sensor system of a sensor device of a motor vehicle
DE102017200607B4 (en) Method and device for detecting an object in a vehicle
DE102005025963A1 (en) Object detecting method for motor vehicle, involves detecting reflections of all individual rays on seat of motor vehicle as common image by common receiver and evaluating brightness of local reflections of rays within image
WO2007036553A1 (en) Device and method for recording distance images
WO2019048168A1 (en) Stochastically clocked image generation of a lidar system
EP3502614B1 (en) Optical measuring device
DE102014110203B3 (en) Distance measuring sensor for the detection and distance determination of objects
DE102020117060B4 (en) Device and method for detecting the surroundings of a vehicle
EP2270424B1 (en) Opto-electronic sensor and monitoring method
DE102017222258A1 (en) Method for a LIDAR device for detecting a hidden object
DE202012104074U1 (en) 3D camera for three-dimensional monitoring of a surveillance area
DE102011007464A1 (en) Method for visualizing scene, involves selecting scene region in three-dimensional image based on distance information, marking selected scene region in two-dimensional image and presenting scene with marked scene region on display unit

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
ON Later submitted papers
R005 Application deemed withdrawn due to failure to request examination

Effective date: 20120605