AT523045B1 - Verfahren und Vorrichtung zur Sitzgurterkennung - Google Patents
Verfahren und Vorrichtung zur Sitzgurterkennung Download PDFInfo
- Publication number
- AT523045B1 AT523045B1 ATA50152/2020A AT501522020A AT523045B1 AT 523045 B1 AT523045 B1 AT 523045B1 AT 501522020 A AT501522020 A AT 501522020A AT 523045 B1 AT523045 B1 AT 523045B1
- Authority
- AT
- Austria
- Prior art keywords
- seat belt
- data
- seat
- person
- processing unit
- Prior art date
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R22/00—Safety belts or body harnesses in vehicles
- B60R22/48—Control systems, alarms, or interlock systems, for the correct application of the belt or harness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
- B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
- B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
- B60R21/01512—Passenger detection systems
- B60R21/0153—Passenger detection systems using field detection presence sensors
- B60R21/01538—Passenger detection systems using field detection presence sensors for image processing, e.g. cameras or sensor arrays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R22/00—Safety belts or body harnesses in vehicles
- B60R22/48—Control systems, alarms, or interlock systems, for the correct application of the belt or harness
- B60R2022/4808—Sensing means arrangements therefor
- B60R2022/485—Sensing means arrangements therefor for sensing belt anchor position, belt orientation, or the like
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
Abstract
Die Erfindung betrifft ein Verfahren und eine Vorrichtung zur Detektion der korrekten Positionierung eines Sitzgurtes (1) bei einer in einem Sitz (2) eines Fahrzeugs (3) sitzenden Person (4), umfassend die folgenden Schritte: Aufnahme, durch eine im Fahrzeug (3) angeordnete Bildaufnahmeeinheit (5) in 2-D oder 3-D, des Sitzes (2) mit der Person (4) und dem Sitzgurt (1), Extraktion, durch eine Datenverarbeitungseinheit (6), eines räumlichen Verlaufs des Sitzgurtes (1) und von Körperdaten der Person (4), Berechnung, durch die Datenverarbeitungseinheit (6), eines räumlichen Sitzgurtdatenmodells (7) aus dem räumlichen Verlauf des Sitzgurtes (1) und eines Körperdatenmodells (8) aus den Körperdaten, Vergleich, durch eine Komparatoreinheit (12), des Sitzgurtdatenmodells (7) und des Körperdatenmodells (8) und Bestimmung der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes (1), Anzeige, durch eine Anzeigeeinheit (13), der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes (1).
Description
VERFAHREN UND VORRICHTUNG ZUR SITZGURTERKENNUNG
[0001] Die Erfindung betrifft ein Verfahren und eine Vorrichtung zur Erkennung der Positionierung des Sitzgurtes in einem Fahrzeug.
[0002] Sitzgurte werden in Fahrzeugen standardmäßig verbaut und in der Regel ist es gesetzlich vorgeschrieben, dass die Sitzgurte von den Insassen verwendet werden. Um dies zu detektieren, sind in den Schließmechanismen der Sitzgurte verbaute Sensoren bekannt, die detektieren ob der Sitzgurt geschlossen ist oder nicht.
[0003] Derartige Sensoren haben aber keine Zusatzinformation darüber, ob sich auch wirklich eine Person auf dem Sitz befindet, oder ob der Gurt auch korrekt angelegt wurde. Somit liegt die Verantwortung über die richtige Anbringung des Sitzgurtes bei der Person selbst bzw. bei dem Lenker des Fahrzeuges.
[0004] Aus dem Stand der Technik sind gattungsgemäße Verfahren und Vorrichtungen bekannt. So zeigt die Druckschrift WO 2 019 005 950 A1 ein Sitzgurtsystem bei dem der Sitzgurt um die Taille eines Insassen gestrafft wird, um den Sitzgurt richtig zu positionieren. Bei der Druckschrift US 2 018 326 944 A1 wird die Position des Gurtes mit einem 3D-Bildaufnahmesystem bestimmt. Bei der Druckschrift EP 2 937 251 A1 wird sowohl die Position des Gurtes, als auch des Insassen an vorbestimmten Positionen durch eine Kamera ermittelt. Die Druckschrift EP 2 210 765 A1 beschreibt ein Verfahren, bei dem der Zustand des Gurts laufend durch eine Kamera überwacht wird. Die Druckschrift CN 20 2518 219 U bezieht sich auf Verfahren zur maschinellen Bildverarbeitung von Aufnahmen des Sicherheitsgurts. Schließlich zeigt auch die DE 102 015 120 811 A1 Verfahren zur optischen Detektion der Sitzgurtposition. Keine dieser Druckschriften aus dem Stand der Technik zeigt jedoch Verfahren oder Vorrichtungen die dazu geeignet sind, zu prüfen, ob die Lage und Ausrichtung des Gurts hinsichtlich der Position und Lage des Insassen auch korrekt angelegt wurde.
[0005] Die Aufgabe der Erfindung besteht darin, dieses Problem zu lösen und ein Verfahren sowie eine Vorrichtung bereitzustellen, wodurch eine automatische Detektion der korrekten Positionierung eines Sitzgurtes erreicht werden kann.
[0006] Diese und andere Aufgaben der Erfindung werden erfindungsgemäß durch ein Verfahren und eine Vorrichtung gemäß den unabhängigen Patentansprüchen gelöst.
[0007] Das erfindungsgemäße Verfahren zur Detektion der korrekten Positionierung eines Sitzgurtes bei einer in einem Sitz eines Fahrzeugs sitzenden Person umfasst mehrere Schritte.
[0008] In einem ersten Schritt nimmt eine im Fahrzeug angeordnete Bildaufnahmeeinheit den Sitz mit der Person und dem Sitzgurt in 2-D oder 3-D auf. Bei diesem Schritt kann es sich insbesondere um Aufnahme eines Fotos oder Videos durch eine Kamera oder eine andere Bildaufnahmeeinheit handeln. Das aufgenommene Bild oder Video wird zur Bearbeitung an eine Datenverarbeitungseinheit übermittelt. Die Datenverarbeitungseinheit extrahiert einen räumlichen Verlauf des Sitzgurtes sowie wesentliche Körperdaten der Person. Diese Extraktion erfolgt beispielsweise durch herkömmliche Bildverarbeitungsroutinen, durch einen Vergleich mit vorab in einer Datenbank hinterlegten Referenzdaten, oder durch Verwendung eines vorab mit Trainingsdaten trainierten neuronalen Netzes, das Teil der Datenverarbeitungseinheit sein kann. Statt eines neuronalen Netzes können auch andere Klassifikationsverfahren aus dem Bereich des maschinellen Lernens erfindungsgemäß vorgesehen sein, wie zum Beispiel Entscheidungsbäume bzw. Random Forests, die als Teil der Datenverarbeitungseinheit implementiert sein können. Eine spezielle Ausgestaltung des Sitzgurtes ist erfindungsgemäß für die Extraktion des Sitzgurtes und der Körperdaten nicht erforderlich.
[0009] Aus dem räumlichen Verlauf des Sitzgurtes generiert die Datenverarbeitungseinheit in Folge ein räumliches Sitzgurtdatenmodell, beispielsweise in Form eines Graphen oder einer anderen geeigneten Datenstruktur. In analoger Weise generiert die Datenverarbeitungseinheit ein
räumliches Körperdatenmodell aus den Körperdaten, wiederum in Form eines Graphen oder einer anderen geeigneten Datenstruktur.
[0010] Eine Komparatoreinheit vergleicht nun das Sitzgurtdatenmodell und das Körperdatenmodell und bestimmt daraus die Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes.
[0011] Dieser Vergleich kann in der Komparatoreinheit erfindungsgemäß durch unterschiedliche Verfahren erfolgen. Beispielsweise kann ein vorab mit Referenzdatenmustern trainiertes neuronales Netz, ein Entscheidungsbaum oder ein anderes Klassifikationsverfahren aus dem Bereich des maschinellen Lernens herangezogen werden. Der Vergleich kann jedoch auch erfolgen, indem die Komparatoreinheit vorbestimmte Heuristiken anwendet. Die Komparatoreinheit kann vorzugsweise ein Teil der Datenverarbeitungseinheit sein.
[0012] Danach zeigt eine Anzeigeeinheit die Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes im Fahrzeug an, beispielsweise durch ein Lichtsignal oder ein Symbol an einer geeigneten Stelle im Armaturenbrett des Fahrers.
[0013] Erfindungsgemäß kann vorgesehen sein, dass die Bildaufnahmeeinheit ein Video aufnimmt, das von der Datenverarbeitungseinheit herangezogen wird, um eine robustere Extraktion des räumlichen Verlaufs des Sitzgurtes und der Körperdaten der Person zu ermöglichen. Insbesondere kann vorgesehen sein, dass die Bildaufnahmeeinheit eine Vielzahl von Bildern oder Videos aufnimmt, die von der Datenverarbeitungseinheit überlagert werden, um eine robustere Extraktion des räumlichen Verlaufs des Sitzgurtes und der Körperdaten der Person zu ermöglichen. Eine Beschränkung auf eine bestimmte Form oder grafische Ausgestaltung des Sitzgurtes soll dabei nicht erforderlich sein. Es können speziell zu diesem Zweck adaptierte Bilderkennungsalgorithmen herangezogen werden.
[0014] Erfindungsgemäß ist vorgesehen, dass die Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes bestimmt wird, indem die Datenverarbeitungseinheit das Sitzgurtdatenmodell und das Körperdatenmodell in ein Sitzdatenmuster kombiniert, die Komparatoreinheit das Sitzdatenmuster mit einer Vielzahl an in einer Datenbank vorab gespeicherten korrekten Referenzdatenmustern vergleicht, und bei hinreichender Übereinstimmung mit den korrekten Referenzdatenmustern die Korrektheit feststellt und andernfalls die Fehlerhaftigkeit feststellt. Zu diesem Zweck kann insbesondere vorgesehen sein, dass die Datenverarbeitungseinheit mit einer Datenbank über eine Schnittstelle verbunden ist. Dabei kann es sich um eine externe Datenbank auf einem Server im Internet handeln, oder eine interne Datenbank im Fahrzeug.
[0015] Die Datenbank kann vor Ausführung des erfindungsgemäßen Verfahrens mit Referenzdatenmustern gefüllt werden, welche Sitzdatenmuster mit korrekter und fehlerhafter Positionierung des Sitzgurtes bei einer Vielzahl unterschiedlicher Personen umfassen. Die Komparatoreinheit kann das Sitzdatenmuster direkt mit den Referenzdatenmustern vergleichen und beispielsweise einen Matching-Algorithmus anwenden.
[0016] Alternativ können die in der Datenbank gespeicherten Referenzdatenmuster auch genutzt werden, um vorab ein Klassifikationsverfahren aus dem Bereich des maschinellen Lernens, zum Beispiel ein neuronales Netz, oder Entscheidungsbäume zu trainieren. Derartige Klassifikationsverfahren können als Teil der Datenverarbeitungseinheit implementiert sein.
[0017] In anderen erfindungsgemäßen Ausführungsformen kann die Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes auch bestimmt werden, indem die Datenverarbeitungseinheit räumliche Sitzgurtkenngrößen des Sitzgurtdatenmodells bestimmt, beispielsweise die Länge und den Winkel zwischen zumindest einem ersten Sitzgurtabschnitt und zumindest einem zweiten Sitzgurtabschnitt, und räumliche Körperkenngrößen des Körperdatenmodells bestimmt, beispielsweise die Schulterbreite, die Rumpflänge und die Anordnung der Schultergelenke und des Beckens der Person, und die Sitzgurtkenngrößen den Körperkenngrößen räumlich überlagert. Aus der räumlichen Überlagerung der Sitzgurtkenngrößen und Körperkenngrößen kann die Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes unmittelbar und ohne die Verwendung von Matching-Algorithmen oder Klassifikationsverfahren festgestellt werden, beispielsweise durch Verwendung von heuristischen und vorab bestimmten Zusammenhängen.
[0018] Beispielsweise kann in der Datenverarbeitungseinheit hinterlegt sein, dass ein Sitzgurt korrekt positioniert ist, wenn ein erster Sitzgurtabschnittes über der detektierten Schulter des Körpers verläuft, und ein zweiter Sitzgurtabschnitt über das detektierte Becken des Körpers verläuft, und ein Winkel zwischen den beiden Sitzgurtabschnitten innerhalb eines vorbestimmten Bereichs, beispielsweise innerhalb von 30° bis 60° liegt.
[0019] Selbstverständlich sind auch andere Heuristiken erfindungsgemäß vorgesehen. Die Kommunikation mit einer Datenbank ist in diesem Ausführungsbeispiel nicht zwingend erforderlich.
[0020] Erfindungsgemäß kann vorgesehen sein, dass es sich bei den Körperdaten zumindest um Positionen von definierten Schlüsselpunkten, wie zum Beispiel Handgelenken, Armgelenken, Brustbein, Schultergelenken, Kniegelenken, Ellbogengelenken, Hüftgelenken, oder Kopfmittelpunkte, sowie um Abmessungen zwischen diesen Positionen, wie zum Beispiel Schulterbreite, Beckenbreite, Halslänge, Oberschenkellänge, und dergleichen handelt.
[0021] Die Erfindung umfasst ferner ein computerlesbares Speichermedium, umfassend Anweisungen, die eine Datenverarbeitungseinheit zur Ausführung eines erfindungsgemäßen Verfahrens veranlassen, beispielsweise eine CD-ROM, eine Festplatte, oder einen USB-Stick.
[0022] Die Erfindung umfasst ebenso eine Vorrichtung zur Detektion der korrekten Positionierung eines Sitzgurtes bei einer in einem Sitz eines Fahrzeugs sitzenden Person, umfassend eine im Fahrzeug angeordnete Bildaufnahmeeinheit in 2-D oder 3-D, die zur Aufnahme des Sitzes mit der Person und dem Sitzgurt ausgebildet ist, eine Datenverarbeitungseinheit, die zur Extraktion eines räumlichen Verlaufs des Sitzgurtes und von Körperdaten der Person und zur Generierung eines räumlichen Sitzgurtdatenmodells aus dem räumlichen Verlauf des Sitzgurtes und eines Körperdatenmodells aus den Körperdaten ausgebildet ist, eine Komparatoreinheit, die zum Vergleich des Sitzgurtdatenmodells und des Körperdatenmodells und zur Bestimmung der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes ausgebildet ist, sowie eine Anzeigeeinheit, die zur Anzeige der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes ausgebildet ist. Die Bildaufnahmeeinheit kann insbesondere als Kamera ausgebildet sein. Die Kamera kann beispielsweise im Armaturenbrett oder im Bereich des Rückspiegels, der Windschutzscheibe oder des Daches des Fahrzeugs angeordnet sein.
[0023] Erfindungsgemäß kann vorgesehen sein, dass die Komparatoreinheit mit einer Datenbank in Verbindung steht, in der eine Vielzahl an Referenzdatenmustern gespeichert sind, wobei die Datenverarbeitungseinheit dazu ausgebildet ist, das Sitzgurtdatenmodell und das Körperdatenmodell in ein Sitzdatenmuster zu kombinieren, die Komparatoreinheit dazu ausgebildet ist, das Sitzdatenmuster mit den Referenzdatenmustern zu vergleichen, und dazu ausgebildet ist, bei hinreichender Übereinstimmung mit den Referenzdatenmustern die Korrektheit, andernfalls die Fehlerhaftigkeit der Positionierung des Sitzgurtes festzustellen.
[0024] Die Vorrichtung kann vorzugsweise zur Gänze in einem Fahrzeug angeordnet sein. Es kann jedoch auch vorgesehen sein, dass die Datenverarbeitungseinheit und die Komparatoreinheit im Fahrzeug angeordnet sind und über eine Schnittstelle, beispielsweise eine drahtlose Verbindung, mit einem externen Server, beispielsweise einem Server im Internet, kommunizieren, auf dem sich gegebenenfalls eine Datenbank mit vorab hinterlegten und/oder laufend ergänzten Referenzdatenmustern befindet.
[0025] Bei der Bildaufnahmeeinheit kann es sich um eine ToF (Time-of-Flight) Kamera handeln, die dazu ausgebildet ist, ein 3D-Tiefenbild aufzunehmen. Dies erleichtert die robuste Unterscheidung des Sitzgurtes vom Körper der Person und somit die Extraktion des räumlichen Verlaufs des Sitzgurtes und der der Körperdaten. Die Bildaufnahmeeinheit wird im Fahrzeug vorzugsweise derart angeordnet, dass die zu analysierenden Objekte, also die Person und der Sitzgurt, im aufgenommenen Bild sichtbar sind. Zur Extraktion des Sitzgurtes und der Körperdaten können Bildanalysebibliotheken in einer Datenbank und/oder ein mit Trainingsbeispielen trainierter Detektor, beispielsweise ein neuronales Netz herangezogen werden.
[0026] Die Datenverarbeitungseinheit kann als Mikrocontroller oder Mikrocomputer ausgebildet sein und eine zentrale Verarbeitungseinheit (CPU), einen flüchtigen Halbleiterspeicher (RAM),
einen nichtflüchtigen Halbleiterspeicher (ROM, SSD-Festplatte), einen magnetischen Speicher (Festplatte) und/oder einen optischen Speicher (CD-ROM) sowie Schnittstelleneinheiten (Ethernet, USB) und dergleichen umfassen.
[0027] Die Bestandteile derartiger Datenverarbeitungseinheiten sind dem Fachmann grundsätzlich bekannt. Die Komparatoreinheit kann als separate Hardwareeinheit, oder vorzugsweise als Softwaremodul im RAM oder ROM der Datenverarbeitungseinheit vorgesehen sein.
[0028] Die Datenbank kann als Softwaremodul in der Datenverarbeitungseinheit oder in einem externen Server vorgesehen sein. Die Datenbank kann Trainingsdaten beinhalten, beispielsweise Informationen über den Körperbau typischer Personen (Gelenkspositionen, Größe, Umfänge, etc.) und die Position der zu Sitzgurten gehörenden Pixel in einem Trainingsbild. Die Pixel werden danach zu zusammengehörenden Sitzgurtbändern gruppiert.
[0029] Erfindungsgemäß kann vorgesehen sein, dass die Detektion der korrekten Positionierung eines Sitzgurtes für mehrere Personen erfolgt. Bei der Detektion von mehreren Personen und mehreren Sitzgurten kann in einem weiteren Schritt jeder erkannten Person jeweils genau ein erkannter Sitzgurt zugeordnet werden. Die Komparatoreinheit trifft dann für jede erkannte Kombination aus Körperdatenmodell und Sitzgurtdatenmodell eine Aussage darüber, ob die detektierten Sitzgurte richtig angelegt sind oder nicht.
[0030] Weitere erfindungsgemäße Merkmale ergeben sich aus den Ansprüchen, den Ausführungsbeispielen und den Figuren.
[0031] Die Erfindung wird im Folgenden an Hand eines exemplarischen, nicht ausschließlichen Ausführungsbeispiels erläutert.
[0032] Fig. 1 zeigt eine schematische Darstellung einer Ausführungsform einer erfindungsgemäßen Vorrichtung in einem Fahrzeug;
[0033] Figs. 2a - 20 zeigen schematische Darstellungen der von einer Ausführungsform der erfindungsgemäßen Vorrichtung erstellten Datenmodelle;
[0034] Fig. 3 zeigt eine schematische Darstellung des Datenflusses in einer Ausführungsform eines erfindungsgemäßen Verfahrens.
[0035] Fig. 1 zeigt eine schematische Darstellung einer Ausführungsform einer erfindungsgemäßen Vorrichtung in einem Fahrzeug 3. Im Innenraum des Fahrzeugs 3 befindet sich ein Sitz 2 mit einem Sitzgurt 1 für eine (nicht dargestellte) Person 4. Es ist eine zentral über dem Lenker am Dach des Fahrzeuginnenraums angeordnete Bildaufnahmeeinheit 5 in Form einer Kamera vorgesehen, die derart ausgerichtet ist, dass sie den Sitz 2 zum Großteil erfasst. Ferner befinden sich im Fahrzeug 3 eine Datenverarbeitungseinheit 6, eine damit verbundene Komparatoreinheit 12 in Form eines Softwaremoduls und eine Anzeigeeinheit 13 in Form einer Lampe oder einer elektronischen Anzeige auf einem Display im Armaturenbrett. Die Datenverarbeitungseinheit 6 und die Komparatoreinheit 12 sind in diesem Ausführungsbeispiel mit einer internen Datenbank 9 verbunden.
[0036] Figs. 2a - 2b zeigen schematische Darstellungen der von einer Ausführungsform der erfindungsgemäßen Vorrichtung erstellten Datenmodelle, nämlich des Sitzgurtdatenmodells 7 und des Körperdatenmodells 8. Die Person 4 ist schematisch angedeutet, ebenfalls dargestellt ist der Sitz 2 und der Sitzgurt 1. In diesem Ausführungsbeispiel ist der Sitzgurt korrekt positioniert.
[0037] Die Komparatoreinheit 12 erkennt die korrekte Positionierung des Sitzgurtes 1 in diesem Ausführungsbeispiel durch Anwenden der Heuristik, dass ein erster Sitzgurtabschnitt 14 die Schulter der Person 4 kreuzt, und ein zweiter Sitzgurtabschnitt 15 das Becken der Person 4 kreuzt bzw. in geringem Abstand im Wesentlichen parallel über dem Becken der Person 4 verläuft. Ferner beträgt der Winkel a zwischen dem detektierten ersten Sitzgurtabschnitt 14 und zweiten Sitzgurtabschnitt 15 etwa 45°. Darüber hinaus kann die Komparatoreinheit 12 oder die Datenverarbeitungseinheit 6 auch die Länge der beiden Sitzgurtabschnitte 14, 15 feststellen und diese zur Beurteilung der Korrektheit heranziehen; in der Regel ist der erste Sitzgurtabschnitt 14 bei korrekter Positionierung länger als der zweite Sitzgurtabschnitt 15.
[0038] In weiteren, nicht dargestellten Ausführungsformen kann die Komparatoreinheit 12 schon aufgrund der detektierten Länge des ersten Sitzgurtabschnitts 14 und des Winkels Bß zwischen dem ersten Sitzgurtabschnitt 14 und dem im Körperdatenmodell 8 detektierten Rückgrat feststellen, ob eine korrekte Positionierung gegeben ist.
[0039] Mit anderen Worten, es ist nicht zwingend erforderlich, beide Sitzgurtabschnitte 14, 15 zu detektieren, um eine korrekte Positionierung des Sitzgurtes feststellen zu können.
[0040] Fig. 3 zeigt eine schematische Darstellung des Datenflusses in einer Ausführungsform eines erfindungsgemäßen Verfahrens. Die Bildaufnahmeeinheit 5 liefert Fotos und/oder Videos des Sitzes 2 mit der Person 4 und dem Sitzgurt 1 an die Datenverarbeitungseinheit 6. Diese extrahiert aus den Fotos zunächst den räumlichen Verlauf des Sitzgurtes 1 und Körperdaten der Person 4. Dabei kann die Datenverarbeitungseinheit auf Bilderkennungsalgorithmen zurückgreifen oder einen internen oder externen, vorab mit Trainingsbeispielen trainierten Detektor, beispielsweise ein neuronales Netz, heranziehen. Dieser Detektor ist Teil der Datenverarbeitungseinheit 6. Im vorliegenden Ausführungsbeispiel vergleicht die Datenverarbeitungseinheit 6 die aufgenommenen Fotos und/oder Videos mit auf einer Datenbank 9 hinterlegten Fotos und/oder Videos von vorab aufgenommenen Personen mit angelegtem Sitzgurt, um den räumlichen Verlauf des Sitzgurtes 1 und die Körperdaten der Person zu extrahieren.
[0041] Eine spezielle Markierung oder Färbung des Sitzgurtes 1 kann bei der Extraktion vorteilhaft sein, ist jedoch in keinem der Ausführungsbeispiele der Erfindung zwingend erforderlich.
[0042] Aus dem räumlichen Verlauf des Sitzgurtes 1 und den Körperdaten der Person 4 generiert die Datenverarbeitungseinheit 6 ein räumliches Sitzgurtdatenmodell 7 und ein Körperdatenmodell 8 in Form von Graphen, also durch Linien verbundene Punktwolken. Dies hat den Vorteil, dass deutlich weniger Speicherplatz und Rechenaufwand benötigt wird, als wenn die Fotos in Folge direkt verwendet werden. Die Graphen werden in ein gemeinsames Sitzdatenmuster 10 kombiniert und an eine Komparatoreinheit 12 übermittelt. Die Komparatoreinheit 12 vergleicht das Sitzdatenmuster 12 mit einer Vielzahl an vorab in einer Datenbank 9 gespeicherten Referenzdatenmustern 11. Bei hinreichender Übereinstimmung mit den Referenzdatenmustern stellt die Komparatoreinheit 12 oder die Datenverarbeitungseinheit 6 die Korrektheit der Positionierung des Sitzgurtes fest, andernfalls die Fehlerhaftigkeit.
[0043] Die Erfindung beschränkt sich nicht auf die beschriebenen Ausführungsbeispiele sondern umfasst auch weitere Ausführungen der vorliegenden Erfindung im Rahmen der nachfolgenden Patentansprüche.
BEZUGSZEICHENLISTE
1 Sitzgurt
2 Sitz
3 Fahrzeug
4 Person
5 Bildaufnahmeeinheit
6 Datenverarbeitungseinheit
7 Sitzgurtdatenmodell
8 Körperdatenmodell
9 Datenbank
10 Sitzdatenmuster
11 Referenzdatenmuster
12 Komparatoreinheit
13 Anzeigeeinheit
14 Erster Sitzgurtabschnitt 15 Zweiter Sitzgurtabschnitt
Claims (8)
1. Verfahren zur Detektion der korrekten Positionierung eines Sitzgurtes (1) bei einer in einem
Sitz (2) eines Fahrzeugs (3) sitzenden Person (4), umfassend die folgenden Schritte:
- Aufnahme, durch eine im Fahrzeug (3) angeordnete Bildaufnahmeeinheit (5) in 2-D oder 3-D, des Sitzes (2) mit der Person (4) und dem Sitzgurt (1),
- Extraktion, durch eine Datenverarbeitungseinheit (6), eines räumlichen Verlaufs des Sitzgurtes (1) und von Körperdaten der Person (4),
- Generierung, durch die Datenverarbeitungseinheit (6), eines räumlichen Sitzgurtdatenmodells (7) aus dem räumlichen Verlauf des Sitzgurtes (1) und eines Körperdatenmodells (8) aus den Körperdaten,
- Vergleich, durch eine Komparatoreinheit (12), des Sitzgurtdatenmodells (7) und des Körperdatenmodells (8) und Bestimmung der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes (1),
- Anzeige, durch eine Anzeigeeinheit (13), der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes (1),
dadurch gekennzeichnet, dass die Bestimmung der Korrektheit oder Fehlerhaftigkeit der
Positionierung des Sitzgurtes (1) erfolgt, indem
- die Datenverarbeitungseinheit (6) das Sitzgurtdatenmodell (7) und das Körperdatenmodell (8) in ein Sitzdatenmuster (10) kombiniert,
- die Komparatoreinheit (12) das Sitzdatenmuster (10) mit einer Vielzahl an in einer Datenbank (9) vorab gespeicherten korrekten Referenzdatenmustern (11) vergleicht, beispielsweise durch Anwendung eines Matching-Algorithmus oder eines Klassifikationsverfahrens aus dem Bereich des maschinellen Lernens, insbesondere eines vorab mit den Referenzdatenmustern (11) trainierten neuronalen Netzes,
- bei hinreichender Übereinstimmung mit den korrekten Referenzdatenmustern (11) die Korrektheit feststellt und andernfalls die Fehlerhaftigkeit feststellt.
2, Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Bildaufnahmeeinheit (5) eine Vielzahl von Bildern aufnimmt, die von der Datenverarbeitungseinheit (6) überlagert werden, um eine robustere Extraktion des räumlichen Verlaufs des Sitzgurtes (1) und der Körperdaten der Person (4) zu ermöglichen.
3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Bildaufnahmeeinheit (5) ein Video aufnimmt, das von der Datenverarbeitungseinheit (6) herangezogen wird, um eine robustere Extraktion des räumlichen Verlaufs des Sitzgurtes (1) und der Körperdaten der Person (4) zu ermöglichen.
4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass die Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes (1) bestimmt wird, indem die Datenverarbeitungseinheit (6)
- räumliche Sitzgurtkenngrößen des Sitzgurtdatenmodells (7) bestimmt, beispielsweise die Länge und den Winkel zwischen zumindest einem ersten Sitzgurtabschnitt und zumindest einem zweiten Sitzgurtabschnitt,
- räumliche Körperkenngrößen des Körperdatenmodells (8) bestimmt, beispielsweise die Schulterbreite, die Rumpflänge und die Anordnung der Schultergelenke und des Beckens der Person (4),
- die Sitzgurtkenngrößen den Körperkenngrößen räumlich überlagert und vorbestimmte Heuristiken anwendet, um die Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes festzustellen, beispielsweise den Verlauf des ersten Sitzgurtabschnittes über der Schulter und des zweiten Sitzgurtabschnittes über das Becken der Person (4) sowie einen Winkel zwischen den beiden Sitzgurtabschnitten innerhalb eines vorbestimmten Bereichs, beispielsweise 30° bis 60°.
5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass es sich bei den Körperdaten zumindest um Positionen von definierten Schlüsselpunkten, wie zum Beispiel Handgelenken, Armgelenken, Brustbein, Schultergelenken, Kniegelenken, Ellbogenge-
lenken, Hüftgelenken, oder Kopfmittelpunkte, sowie um Abmessungen zwischen diesen Positionen, wie zum Beispiel Schulterbreite, Beckenbreite, Halslänge, Oberschenkellänge, und dergleichen handelt.
6. Computerlesbares Speichermedium, umfassend Anweisungen, die eine Datenverarbeitungseinheit (6) zur Ausführung eines Verfahrens nach einem der Ansprüche 1 bis 5 veranlassen.
7. Vorrichtung zur Detektion der korrekten Positionierung eines Sitzgurtes (1) bei einer in einem Sitz (2) eines Fahrzeugs (3) sitzenden Person (4), umfassend: - eine im Fahrzeug (3) angeordnete Bildaufnahmeeinheit (5) in 2-D oder 3-D, die zur Aufnahme des Sitzes (2) mit der Person (4) und dem Sitzgurt (1) ausgebildet ist, - eine Datenverarbeitungseinheit (6), die i. zur Extraktion eines räumlichen Verlaufs des Sitzgurtes (1) und von Körperdaten der Person (4) und zur
il. Generierung eines räumlichen Sitzgurtdatenmodells (7) aus dem räumlichen Verlauf des Sitzgurtes (1) und eines Körperdatenmodells (8) aus den Körperdaten ausgebildet ist,
- eine Komparatoreinheit (12), die zum Vergleich des Sitzgurtdatenmodells (7) und des Körperdatenmodells (8) und Bestimmung der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes (1) ausgebildet ist,
- eine Anzeigeeinheit (13), die zur Anzeige der Korrektheit oder Fehlerhaftigkeit der Positionierung des Sitzgurtes (1) ausgebildet ist,
dadurch gekennzeichnet, dass die Komparatoreinheit (12) mit einer Datenbank (9) in Ver-
bindung steht, in der eine Vielzahl an Referenzdatenmustern (11) gespeichert sind, und wo-
bei
- die Datenverarbeitungseinheit (6) dazu ausgebildet ist, das Sitzgurtdatenmodell (7) und
das Körperdatenmodell (8) in ein Sitzdatenmuster (10) zu kombinieren,
- die Komparatoreinheit (12) dazu ausgebildet ist, das Sitzdatenmuster (10) mit den Referenzdatenmustern (11) zu vergleichen, und _
- die Komparatoreinheit (12) dazu ausgebildet ist, bei hinreichender Übereinstimmung mit den Referenzdatenmustern (11) die Korrektheit, andernfalls die Fehlerhaftigkeit der Positionierung des Sitzgurtes festzustellen.
8. Vorrichtung nach Anspruch 7, dadurch gekennzeichnet, dass die Vorrichtung zur Gänze in einem Fahrzeug angeordnet ist.
Hierzu 1 Blatt Zeichnungen
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
ATA50152/2020A AT523045B1 (de) | 2020-03-02 | 2020-03-02 | Verfahren und Vorrichtung zur Sitzgurterkennung |
PCT/EP2021/051826 WO2021175517A1 (de) | 2020-03-02 | 2021-01-27 | Verfahren und vorrichtung zur optischen sitzgurterkennung |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
ATA50152/2020A AT523045B1 (de) | 2020-03-02 | 2020-03-02 | Verfahren und Vorrichtung zur Sitzgurterkennung |
Publications (2)
Publication Number | Publication Date |
---|---|
AT523045B1 true AT523045B1 (de) | 2021-05-15 |
AT523045A4 AT523045A4 (de) | 2021-05-15 |
Family
ID=74347095
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
ATA50152/2020A AT523045B1 (de) | 2020-03-02 | 2020-03-02 | Verfahren und Vorrichtung zur Sitzgurterkennung |
Country Status (2)
Country | Link |
---|---|
AT (1) | AT523045B1 (de) |
WO (1) | WO2021175517A1 (de) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102022202994A1 (de) | 2021-12-27 | 2023-06-29 | Hyundai Mobis Co., Ltd. | Vorrichtung und Verfahren zum Bestimmen des Anlegens eines Sicherheitsgurts |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11938878B1 (en) * | 2021-06-25 | 2024-03-26 | Zoox, Inc. | Occupant restraint system and method |
GB2610169A (en) * | 2021-08-20 | 2023-03-01 | Aptiv Tech Ltd | Method and system for creating training data |
DE102021211739B4 (de) | 2021-10-18 | 2023-07-06 | Volkswagen Aktiengesellschaft | Bestimmung der Sternumsposition |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102004001480A1 (de) * | 2004-01-09 | 2005-08-04 | Conti Temic Microelectronic Gmbh | Vorrichtung und Verfahren zur Einstellung eines Auslöseschwellwertes einer Insassenschutzeinrichtung in einem Fahrzeug |
EP2210765A1 (de) * | 2009-01-21 | 2010-07-28 | Mazda Motor Corporation | Vorrichtung zur Erkennung des Zustands des Fahrzeuginnenraums und entsprechendes Verfahren |
CN202518219U (zh) * | 2012-01-20 | 2012-11-07 | 江苏大学 | 基于机器视觉的安全带佩带识别装置 |
DE102013018742A1 (de) * | 2013-11-07 | 2015-05-07 | Daimler Ag | Verfahren zur Ermittlung eines Anlegestatus eines Sicherheitsgurtes |
EP2937251A1 (de) * | 2014-04-24 | 2015-10-28 | Volvo Car Corporation | System und Verfahren zur Detektion der Position des Sicherheitsgurts |
DE102015120811A1 (de) * | 2014-12-04 | 2016-06-09 | GM Global Technology Operations, LLC (n.d. Ges. d. Staates Delaware) | Detektion der Position eines Sicherheitsgurts in einem Fahrzeug |
US20180326944A1 (en) * | 2017-05-15 | 2018-11-15 | Joyson Safety Systems Acquisition Llc | Detection and Monitoring of Occupant Seat Belt |
WO2019005950A1 (en) * | 2017-06-30 | 2019-01-03 | Zoox, Inc. | SAFETY BELT SYSTEM COMPRISING AN OCCUPANT SENSOR |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4403102B2 (ja) * | 2004-05-26 | 2010-01-20 | 株式会社東芝 | エアバッグ装置及び乗員検知装置並びにプログラム |
US9365186B2 (en) * | 2014-08-17 | 2016-06-14 | Toyota Motor Engineering & Manufacturing North America, Inc. | Advanced seatbelt interlock using video recognition |
CN110114246B (zh) * | 2016-12-07 | 2022-03-01 | 乔伊森安全系统收购有限责任公司 | 3d飞行时间有源反射感测系统和方法 |
US10501048B2 (en) * | 2018-01-19 | 2019-12-10 | Ford Global Technologies, Llc | Seatbelt buckling detection |
-
2020
- 2020-03-02 AT ATA50152/2020A patent/AT523045B1/de active
-
2021
- 2021-01-27 WO PCT/EP2021/051826 patent/WO2021175517A1/de active Application Filing
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102004001480A1 (de) * | 2004-01-09 | 2005-08-04 | Conti Temic Microelectronic Gmbh | Vorrichtung und Verfahren zur Einstellung eines Auslöseschwellwertes einer Insassenschutzeinrichtung in einem Fahrzeug |
EP2210765A1 (de) * | 2009-01-21 | 2010-07-28 | Mazda Motor Corporation | Vorrichtung zur Erkennung des Zustands des Fahrzeuginnenraums und entsprechendes Verfahren |
CN202518219U (zh) * | 2012-01-20 | 2012-11-07 | 江苏大学 | 基于机器视觉的安全带佩带识别装置 |
DE102013018742A1 (de) * | 2013-11-07 | 2015-05-07 | Daimler Ag | Verfahren zur Ermittlung eines Anlegestatus eines Sicherheitsgurtes |
EP2937251A1 (de) * | 2014-04-24 | 2015-10-28 | Volvo Car Corporation | System und Verfahren zur Detektion der Position des Sicherheitsgurts |
DE102015120811A1 (de) * | 2014-12-04 | 2016-06-09 | GM Global Technology Operations, LLC (n.d. Ges. d. Staates Delaware) | Detektion der Position eines Sicherheitsgurts in einem Fahrzeug |
US20180326944A1 (en) * | 2017-05-15 | 2018-11-15 | Joyson Safety Systems Acquisition Llc | Detection and Monitoring of Occupant Seat Belt |
WO2019005950A1 (en) * | 2017-06-30 | 2019-01-03 | Zoox, Inc. | SAFETY BELT SYSTEM COMPRISING AN OCCUPANT SENSOR |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102022202994A1 (de) | 2021-12-27 | 2023-06-29 | Hyundai Mobis Co., Ltd. | Vorrichtung und Verfahren zum Bestimmen des Anlegens eines Sicherheitsgurts |
Also Published As
Publication number | Publication date |
---|---|
WO2021175517A1 (de) | 2021-09-10 |
AT523045A4 (de) | 2021-05-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AT523045B1 (de) | Verfahren und Vorrichtung zur Sitzgurterkennung | |
DE19614975C2 (de) | Gesichtsbildverarbeitungssystem | |
EP2584493B1 (de) | Verfahren zur Unterscheidung zwischen einem realen Gesicht und einer zweidimensionalen Abbildung des Gesichts in einem biometrischen Erfassungsprozess | |
DE112013002740T5 (de) | Menscherfassungsvorrichtung | |
WO2019002114A1 (de) | Vorrichtung und verfahren zum rundum-inspizieren von behältnissen am transportband | |
AT523727B1 (de) | Computerimplementiertes Verfahren zur Analyse des Innenraums eines Fahrzeugs | |
DE102019106398A1 (de) | Bildanalysevorrichtung, verfahren und programm | |
DE102017215283A1 (de) | Verfahren zum Anonymisieren eines Bilds für ein Kamerasystem eines Kraftfahrzeugs, Bildverarbeitungseinrichtung, Kamerasystem sowie Kraftfahrzeug | |
DE112016006921T5 (de) | Schätzung der menschlichen Ausrichtung in Bildern unter Verwendung von Tiefeninformationen | |
WO2012013186A2 (de) | Verfahren und vorrichtung zur bestimmung der augentorsion | |
EP3944136A1 (de) | Verfahren zum personalisieren eines id-dokuments und id-dokument | |
DE102020126953B3 (de) | System und Verfahren zum Erfassen einer räumlichen Orientierung einer tragbaren Vorrichtung | |
DE10260642B4 (de) | Verfahren zur Erstellung einer Referenz für Fingerprints und zum Vergleich von Fingerprints | |
EP1756748B1 (de) | Verfahren zur klassifizierung eines objekts mit einer stereokamera | |
WO2005045746A1 (de) | Berührungslose biometrische erkennung | |
DE102019201583A1 (de) | Benutzererkennungsvorrichtung zum Ermitteln einer Identität eines Benutzers | |
EP3830754A1 (de) | Verfahren und vorrichtung zum ermitteln einer erklärungskarte | |
DE10250705A1 (de) | Verfahren und Vorrichtung zur Schattenkompensation in digitalen Bildern | |
EP3142068A1 (de) | Verfahren zur dreidimensionalen erfassung von objekten | |
DE102019114049A1 (de) | Verfahren zur Validierung eines Fahrerassistenzsystems mithilfe von weiteren generierten Testeingangsdatensätzen | |
DE102021211739B4 (de) | Bestimmung der Sternumsposition | |
WO2016034325A1 (de) | Verfahren zur erkennung von manipulationen an einem wert- und/oder sicherheitsdokument | |
DE102021131750A1 (de) | Sensor mit Extender-Schnittstelle | |
DE112022001702T5 (de) | Erfassungsvorrichtung und system zur schätzung des beladungsgrades | |
EP2926323B1 (de) | Verfahren und vorrichtung zur überprüfung einer winkelabhängig eingebrachten lasermarkierung auf einer oberfläche eines dokumentes |