DE102020203584A1 - Verarbeitungseinheit, System, und computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen - Google Patents

Verarbeitungseinheit, System, und computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen Download PDF

Info

Publication number
DE102020203584A1
DE102020203584A1 DE102020203584.9A DE102020203584A DE102020203584A1 DE 102020203584 A1 DE102020203584 A1 DE 102020203584A1 DE 102020203584 A DE102020203584 A DE 102020203584A DE 102020203584 A1 DE102020203584 A1 DE 102020203584A1
Authority
DE
Germany
Prior art keywords
vehicle
sensor
vehicle occupant
processing unit
odors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102020203584.9A
Other languages
English (en)
Inventor
Rene Seidemann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZF Friedrichshafen AG
Original Assignee
ZF Friedrichshafen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZF Friedrichshafen AG filed Critical ZF Friedrichshafen AG
Priority to DE102020203584.9A priority Critical patent/DE102020203584A1/de
Priority to EP21712061.7A priority patent/EP4120892A1/de
Priority to PCT/EP2021/055990 priority patent/WO2021185645A1/de
Priority to US17/913,121 priority patent/US20230127231A1/en
Publication of DE102020203584A1 publication Critical patent/DE102020203584A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20—Means to switch the anti-theft system on or off
    • B60R25/25—Means to switch the anti-theft system on or off using biometry
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022—Monitoring a patient using a global network, e.g. telephone networks, internet
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062—Arrangements for scanning
    • A61B5/0064—Body surface scanning
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1468—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using chemical or electrochemical methods, e.g. by polarographic means
    • A61B5/1477—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using chemical or electrochemical methods, e.g. by polarographic means non-invasive
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/40—Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4005—Detecting, measuring or recording for evaluating the nervous system for evaluating the sensory system
    • A61B5/4011—Evaluating olfaction, i.e. sense of smell
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4845—Toxicology, e.g. by detection of alcohol, drug or toxic products
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893—Cars
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/01—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles operating on vehicle systems or fittings, e.g. on doors, seats or windscreens
    • B60R25/04—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles operating on vehicle systems or fittings, e.g. on doors, seats or windscreens operating on the propulsion system, e.g. engine or drive motor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/30—Detection related to theft or to other events relevant to anti-theft systems
    • B60R25/305—Detection related to theft or to other events relevant to anti-theft systems using a camera
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/70—Labelling scene content, e.g. deriving syntactic or semantic representations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Psychiatry (AREA)
  • Mechanical Engineering (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Physiology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Hospice & Palliative Care (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Social Psychology (AREA)
  • Optics & Photonics (AREA)
  • Psychology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Neurosurgery (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Neurology (AREA)
  • Remote Sensing (AREA)
  • Computational Linguistics (AREA)
  • Electromagnetism (AREA)
  • Chemical & Material Sciences (AREA)

Abstract

Die Erfindung betrifft eine Verarbeitungseinheit (10), ein System (20) und ein computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen (F).

Description

  • Die Erfindung betrifft eine Verarbeitungseinheit, ein System und ein computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen.
  • Geruchssensoren sind aus dem Stand der Technik bekannt, siehe beispielsweise US 2019/0227042 A1 . Die bekannten Geruchssensoren basieren auf Lichtabsorptionsspektroskopie, Oberflächenadsorptions-Verfahren oder chemischen Reaktionen.
  • Im Stand der Technik sind Alcolocks, auch Alkohol-Zündschlosssperre genannt, das heißt Wegfahrsperren in einem Fahrzeug, die ab einem bestimmten Wert an Atemalkoholgehalt des Fahrzeugführers das Anfahren des Fahrzeugs blockieren, bekannt, siehe beispielsweise Pressemitteilungen des Europäischen Parlaments. Die bekannten Alcolocks umfassen ein in Reichweite des Fahrzeugführer-Sitzes angebrachtes Handgerät, das die Alkoholkonzentration des eingeblasenen Atems misst. Bekannt sind auch in einem Bereich eines Armaturenbretts oder Lenkrads aufgesetzte Geräte, die Alkoholkonzentration des eingeblasenen Atems messen. Derartige Handgeräte und aufgesetzte Geräte sind unkomfortabel.
  • Aufgabe der Erfindung war es, wie in einem Fahrzeug Gerüche von Fahrzeuginsassen, insbesondere von Fahrzeugführern, verbessert wahrgenommen werden und damit verbesserte Wegfahrsperren für Fahrzeuge bereitgestellt werden können.
  • Gemäß einem Aspekt stellt die Erfindung eine Verarbeitungseinheit für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen bereit. Die Verarbeitungseinheit umfasst eine erste Schnittstelle zu einem ersten Sensor, der in einem Fahrzeuginnenraum Geruchsmoleküle in Atemluft und/oder aus Körpergeruch des Fahrzeuginsassen erfasst und in erste Signale umformt, um die ersten Signale zu erhalten. Die ersten Signale resultieren aus einer Lichtwechselwirkung oder umfassen Frequenzen und/oder Amplituden von Schwingungen. Ferner umfasst die Verarbeitungseinheit eine zweite Schnittstelle zu einem zweiten Sensor, der den Fahrzeuginsassen identifiziert, um eine Identifikation des Fahrzeuginsassen zu erhalten. Die Verarbeitungseinheit führt Befehle aus, die bewirken, dass die Verarbeitungseinheit in Abhängigkeit einer Position des Fahrzeuginsassen im Fahrzeuginnenraum Gerüche des Fahrzeuginsassen, die auf Drogen und/oder Krankheiten hinweisen, der Identifikation des Fahrzeuginsassen zuordnet und bei einer positiven Zuordnung ein zweites Signal erzeugt, wobei die Befehle einen ersten Maschinenlernalgorithmus umfassen, der trainiert ist, in Abhängigkeit der ersten Signale Alkohol, Kokain, Amphetamine, Zigarettenrauch, Cannabis, Tetrahydrocannabinol, Morphin, Methadone, Ammoniak, Azeton oder eine Kombination dieser Substanzen in den Gerüchen des Fahrzeuginsassen zu identifizieren. Außerdem umfasst die Verarbeitungseinheit eine dritte Schnittstelle zu wenigstens einer Fahrzeugeinheit, um dem Fahrzeuginsassen und/oder einer Fahrzeugsteuerung das zweite Signal bereitzustellen. Der erste Maschinenlernalgorithmus ist auf semantische Bildsegmentierung trainiert zur Identifikation des Fahrzeuginsassen. Alternativ umfassen die Befehle einen zweiten Maschinenlernalgorithmus, der auf semantische Bildsegmentierung trainiert ist zur Identifikation des Fahrzeuginsassen.
  • Die Verarbeitungseinheit ist eine Recheneinheit, die Eingangssignale verarbeitet und Ausgangssignale, beispielsweise als Regel- und/oder Steuersignale, bereitstellt.
  • Nach einem Aspekt der Erfindung umfasst die Verarbeitungseinheit eine elektronische Schaltung, beispielsweise integrierte Schaltkreise. Beispielsweise umfasst die Verarbeitungseinheit programmierbare Logikbausteine, beispielsweise field programmable gateway arrays, bei denen Schaltungsstrukturen mittels Hardware-Befehlen programmierbar sind. Nach einem Aspekt der Erfindung umfasst die Verarbeitungseinheit wenigstens eine zentrale Prozessoreinheit, die Softwareprogramm-Befehle ausführt, und/oder wenigstens eine Graphikprozessoreinheit zum parallelisierten Ausführen von Prozessen oder wenigstens einen Mehrkernprozessor. Nach einem weiteren Aspekt der Erfindung umfasst die Verarbeitungseinheit wenigstens ein Speichermodul, beispielsweise RAM, DRAM SDRAM oder SRAM, für einen Signal- und/oder Datenaustausch mit Prozessoren. Nach einem Aspekt der Erfindung ist die Verarbeitungseinheit ein system-on-chip. Das heißt alle oder zumindest ein großer Teil der Funktionen sind auf einem Chip integriert und können modular erweitert werden. Nach einem weiteren Aspekt der Erfindung ist die Verarbeitungseinheit oder der Chip in ein elektronisches Steuergerät, beispielsweise ein elektronisches Steuergerät für Fahrzeugsteuerung, integriert.
  • Nach einem Aspekt der Erfindung führt die Verarbeitungseinheit ein künstliches neuronales Netzwerk aus, das Mitralzellen, apikale und laterale Dendriten der Mitralzellen, das jeweilige Soma der Mitralzellen und Körnerzellen des Riechkolbens modelliert. Das heißt, das künstlich neuronale Netzwerk ist programmiert oder wird auf der Verarbeitungseinheit derart ausgeführt, dass durch die Ausführung das olfaktorische System von Säugern modelliert wird. Beispielsweise werden die Geruchsmoleküle aus der ausgeatmeten Atemluft den apikalen Dendriten jeder Mitralzelle bereitgestellt. Die Mitralzellen sind Neuronen des künstlichen neuronalen Netzwerks. Die apikalen Dendriten entsprechen gewichteten Verbindungen der Mitralzellen-Neuronen. Die Mitralzellen-Neuronen werden beispielsweise über Aktivierungsfunktionen des künstlichen neuronalen Netzwerks aktiviert und aktivieren weitere Neuronen in einer weiteren Schicht des künstlichen neuronalen Netzwerks. Die weiteren Neuronen in der weiteren Schicht entsprechen den Körnerzellen des Riechkolbens.
  • Nach einem weiteren Aspekt der Erfindung umfasst die Verarbeitungseinheit einen neuronalen Schaltkreis, der das olfaktorische System von Säugern nachbildet. Nach einem Aspekt der Erfindung ist der neuronale Schaltkreis ein neuromorpher Schaltkreis. Durch den neuromorphen Schaltkreis wird das olfaktorische System von Säugern in Hardware abgebildet. Der neuromorphe Schaltkreis ist beispielsweise mittels CMOS-Technik gefertigt, das heißt er beruht auf complementary metal-oxide-semiconductors. Der neuromorphe Schaltkreis umfasst Neuristoren, das sind Bauteile, die Neuronenmodelle und Synapsen umfassen. Die Elemente des neuromorphen Schaltkreises modellieren beispielsweise Mitralzellen, apikale und laterale Dendriten der Mitralzellen, das jeweilige Soma der Mitralzellen und Körnerzellen des Riechkolbens. Nach einem weiteren Aspekt der Erfindung sind die Elemente des neuromorphen Schaltkreises in einem künstlichen neuronalen Netzwerk verbunden. Nach einem weiteren Aspekt der Erfindung wird das künstliche neuronale Netzwerk, welches das olfaktorische System von Säugern modelliert, auf dem neuromorphen Schaltkreis ausgeführt.
  • Nach einem Aspekt der Erfindung führt die Verarbeitungseinheit ein künstliches neuronales Netzwerk aus, das die Mitralzellen, apikale und laterale Dendriten der Mitralzellen, das jeweilige Soma der Mitralzellen und Körnerzellen des Riechkolbens modelliert. Das heißt, das künstlich neuronale Netzwerk ist programmiert oder wird auf dem neuromorphen Schaltkreis derart ausgeführt, dass durch die Ausführung das olfaktorische System von Säugern modelliert wird. Beispielsweise werden die Geruchsmoleküle aus der ausgeatmeten Atemluft den apikalen Dendriten jeder Mitralzelle bereitgestellt. Die Mitralzellen sind Neuronen des künstlichen neuronalen Netzwerks. Die apikalen Dendriten entsprechen gewichteten Verbindungen der Mitralzellen-Neuronen. Die Mitralzellen-Neuronen werden beispielsweise über Aktivierungsfunktionen des künstlichen neuronalen Netzwerks aktiviert und aktivieren weitere Neuronen in einer weiteren Schicht des künstlichen neuronalen Netzwerks. Die weiteren Neuronen in der weiteren Schicht entsprechen den Körnerzellen des Riechkolbens.
  • Fahrzeuge umfassen Passagierfahrzeuge, beispielsweise PKWs, Kleinbusse, Busse, leichte und schwere Nutzfahrzeuge, Landmaschinen, beispielsweise Traktoren oder Bagger, schienengebundene Fahrzeuge, beispielsweise Züge, Schiffe und Passagierdrohnen. Damit ist die Erfindung beispielsweise nicht eingeschränkt auf PKWs, sondern stellt für mehrere Fahrzeugarten, die von einem Fahrzeugführer geführt werden, eine in Bezug auf Wahrnehmung und Reaktion auf Gerüche eine vorteilhafte Anwendung dar. Nach einem weiteren Aspekt stellt die Erfindung für Flottenbetreiber eine in Bezug auf Wahrnehmung und Reaktion auf Gerüche eine vorteilhafte Anwendung dar. Beispielsweise sind Fahrzeuge von Flottenbetreiber mit dem Gegenstand der Erfindung ausgerüstet. Damit erhalten Flottenbetreiber beispielsweise Informationen über ihre Fahrer hinsichtlich Fahrtüchtigkeit in Abhängigkeit eines durch den Gegenstand der Erfindung erkannten Alkoholkonsums oder einer Krankheit. Nach einem Aspekt der Erfindung werden die erfindungsgemäßen Erfassungen an den Flottenbetreiber übermittelt, beispielsweise über elektronische Fahrtenbucheinträge und/oder über Funkkommunikation.
  • Gerüche umfassen Atemgeruch und weitere Gerüche aus anderen Körperöffnungen von Lebewesen, das heißt Körpergerüche, beispielsweise Körperausdünstungen über die Haut. Falls sich in dem Fahrzeuginnenraum Tiere, beispielsweise Hunde, befinden, erfasst der erste Sensor auch Gerüche von den Tieren. Basierend auf den Funktionalitäten des ersten Sensors kann zunächst nicht unterscheiden, von welchem Lebewesen, beispielsweise Mensch oder Tier, Gerüche erfasst werden. Durch die Funktionalität des zweiten Sensors werden die Lebewesen differenziert. Das heißt, durch die Kombination der Funktionalitäten des ersten Sensors und des zweiten Sensors werden Gerüche den jeweiligen Lebewesen zuordenbar.
  • Fahrzeuginsasse umfassen Fahrzeugführer, Fahrzeuginsassen, die nicht die Aufgabe des Führens eines Fahrzeuges ausführen, beispielsweise Beifahrer oder Passagiere, und Tiere. Durch die Funktionalitäten des ersten Sensors werden in dem Fahrzeuginnenraum Gerüche von Fahrzeugführer, Beifahrer und Tieren erfasst. Nach einem Aspekt der Erfindung werden Gerüche von Fahrzeugführern ausgewertet.
  • Lichtwechselwirkung umfasst Lichtstreuung, Rückstreuung, Reflexion, Transmission, Beugung und Brechung. Nach einem Aspekt der Erfindung resultieren die ersten Signale aus einer Lichtstreuung.
  • Geruchsmoleküle werden beispielsweise mittels Signaturen der Geruchsmolekülen erfasst. Die Signaturen umfassen Absorptionslinien in einem Absorptionsspektrum, für die jeweiligen Moleküle spezifisches Streulicht, beispielsweise Raman- oder Rayleigh-Streuung, spezifische Schwingungsmuster basierend auf Molekülmassen oder Kennlinien in Impedanzspektroskopie. Die Schwingungsmuster werden beispielsweise mit Beschleunigungssensoren, zum Beispiel micro-electro-mechanical-systems, erfasst.
  • Nach einem Aspekt der Erfindung sind die Signaturen für das jeweilige Molekül spezifisches Streulicht, beispielsweise Streulicht aus Rückstreuung.
  • Ein Geruchsmolekül ist ein Molekül mit einem kennzeichnenden Geruch. Beispielsweise kennzeichnet das Geruchsmolekül (R)-(+)-Limonen den Hauptgeruchsstoff der Zitrone.
  • Die Signale sind beispielsweise elektrische Signale. Die elektrischen Signale umfassen Schwingungsfrequenzen.
  • Der Fahrzeuginsasse wird nach einem Aspekt der Erfindung über Gesichtserkennung identifiziert, beispielsweise über dreidimensionale Gesichtserkennung, wobei der zweite Sensor ein 3D Sensor oder 2D Sensor ist oder mehrere 2D Sensoren umfasst. Dreidimensionale Gesichtserkennung umfasst nach einem Aspekt der Erfindung Erkennung, Klassifikation und/oder Lokalisation von einzelnen Punkten des Gesichts, beispielsweise Wangenknochen oder Abstände von Augen. Nach einem weiteren Aspekt der Erfindung wird der Fahrzeuginsasse über Haut-Textur-Analyse identifiziert. Beispielsweise wird das Gesicht eines Fahrzeuginsassen mittels Haut-Textur-Analyse identifiziert. Haut-Textur-Analyse umfasst Anordnung von Linien und Poren.
  • Die Befehle, die die Verarbeitungseinheit ausführt, sind Programminstruktionen oder Hardwarebefehle. Die Befehle liegen beispielsweise als Softwarecode oder Maschinencode vor.
  • Maschinelles Lernen ist eine Technologie, die Computern und anderen Datenverarbeitungsvorrichtungen die Ausführung von Aufgaben durch Lernen aus Daten lehrt, anstatt für die Aufgaben programmiert zu werden. Der Maschinenlernalgorithmus lernt die Gerüche und/oder die Identifikation des Fahrzeuginsassen aus den Daten.
  • Ein Vorteil der Bestimmung von Gerüchen, die auf Drogen und/oder Krankheiten hinweisen, in Atemluft und/oder aus Körpergeruch des Fahrzeuginsassen mittels des ersten Maschinenlernalgorithmus ist, dass keine chemischen Verfahren, die bei der Bestimmung des Alkoholgehalts in Atemluft beispielsweise auf ein Blasrohr angewiesen sind und damit unkomfortabel sind, oder Oberflächenkontaktverfahren, beispielsweise Adsorptionsverfahren, oder invasive Verfahren, beispielsweise Blutalkoholbestimmung, anzuwenden sind. Atemluft und andere Körpergerüche werden kontinuierlich abgegeben und werden von der Verarbeitungseinheit ausgewertet.
  • Beispielsweise umfasst der erste Maschinenlernalgorithmus ein Graphen neuronales Netzwerk, in dessen Eingangsschicht ein Graph eingegeben wird, dessen Knoten Atome und dessen Kanten Molekülverbindungen modellieren. Damit werden die Geruchsmoleküle als Graphen modelliert und die Gerüche mit einem Graphen neuronalen Netzwerk bestimmt. Das Graphen neuronale Netzwerk hat beispielsweise gelernt, aus der Struktur von Geruchsmolekülen die mit den Geruchsmolekülen verbundenen Gerüche zu bestimmen. Diese Art der Geruchsbestimmung ist als quantitative structure odor relationship bekannt, siehe beispielsweise B. Sanchez-Lengeling et al., „Machine Learning for Scent: Learning Generalizable Perceptual Representations of Small Molecules“, arXiv:1910.10685v2 [stat.ML].
  • Drogen und/oder Krankheiten besitzen charakteristische Gerüche, die in der Atemluft nachweisbar sind. Drogen, die oder deren Konsum in der Atemluft nachweisbar sind, umfassen Alkohol, Kokain, Amphetamine, Zigarettenrauch, Cannabis, Tetrahydrocannabinol, Morphin und Methadone. Beispielsweise deutet ein Ammoniak-Geruch auf eine Nierenerkrankung hin. Ein Azeton-Geruch deutet auf Diabetes hin.
  • Wird beispielsweise Alkohol in der Atemluft erkannt und zugeordnet, dass diese Atemluft von der Position des Fahrzeugführers von dem Fahrzeugführer ausgeatmet wurde, dann umfasst das zweite Signal ein elektrisches Signal für eine Anzeigevorrichtung, beispielsweise einen Display in Form eines Infotainment-Systems oder eines Head-Up-Displays oder eine akustische Vorrichtung, beispielsweise ein Lautsprechersystem im Fahrzeuginnenraum, um dem Fahrzeuginsassen visuell oder akustisch zu informieren, dass er wegen Alkoholgehalt nicht fahrtüchtig ist. Das zweite Signal umfasst ferner ein Regel- und/oder Steuersignal für die Fahrzeugsteuerung, um in diesem Fall ein Losfahren des Fahrzeuges zu sperren. Neben Anzeigevorrichtung und akustischer Vorrichtung ist ein Steuergerät für Fahrzeugkommunikation ein weiteres Beispiel für eine Fahrzeugeinheit. Fahrzeugkommunikation umfasst vehicle to everything und vehicle to vehicle Kommunikation. Über die Fahrzeugkommunikation wird beispielsweise ein Flottenbetreiber, das ist beispielsweise ein Unternehmen, dem das Fahrzeug gehört oder einer Regierungsbehörde, informiert, dass ein Fahrzeugführer eines seiner Fahrzeuge wegen festgestelltem Alkoholgehalt fahruntüchtig ist.
  • Durch die Zuordnung der Gerüche zu der Identifikation des Fahrzeuginsassen in Abhängigkeit einer Position des Fahrzeuginsassen im Fahrzeuginnenraum wird erreicht, dass hinsichtlich Fahrzeiten die Gerüche mit der Identifikation des Fahrzeuginsassen, nach einem Aspekt des Fahrzeugführers, verknüpft werden. Damit stellt die Verarbeitungseinheit einen Abgleich oder ein Matching der Gerüche mit dem Fahrzeugführer bereit. Durch die Abhängigkeit einer Position des Fahrzeuginsassen wird ferner ausgewertet, ob der Fahrzeuginsasse, dem die Gerüche zugeordnet wurden, sich in einem Fahrzeugführer-Bereich befindet, beispielsweise auf dem Fahrzeugführer-Sitz, und im Erfassungsbereich des ersten und/oder zweiten Sensors. Dadurch wird hinsichtlich der Wahrnehmung und Zuordnung der Gerüche zu dem Fahrzeuginsassen vorteilhafterweise ein Betrug oder Missbrauch durch den Fahrzeuginsassen verhindert oder vorgebeugt. Beispielsweise ist die Fahrtüchtigkeit des Fahrzeugführers durch Alkoholkonsum beeinträchtigt. Ein Beifahrer ist fahrtüchtig. Ohne die Zuordnung der Gerüche zu der Identifikation des Fahrzeuginsassen in Abhängigkeit einer Position des Fahrzeuginsassen im Fahrzeuginnenraum könnte bei Fahrtantritt der Beifahrer sich in den Bereich des Fahrzeugführers begeben. Die Verarbeitungseinheit würde die Gerüche des Beifahrers auswerten, dabei keine Drogen feststellen und über die dritte Schnittstelle der Fahrzeugsteuerung ein zweites Signal zum Losfahren bereitstellen. Der beeinträchtigte Fahrzeugführer würde dann das Fahrzeug führen. Mittels der Zuordnung der Gerüche zu der Identifikation des Fahrzeuginsassen in Abhängigkeit einer Position im Fahrzeuginnenraum erkennt in diesem Fall die Verarbeitungseinheit, dass die erfassten Gerüche dem Beifahrer und nicht dem Fahrzeugführer zugeordnet sind. Das zweite Signal zum Losfahren wird erst bereitgestellt, wenn Gerüche des Fahrzeugführers erfasst wurden und in diesen keine Drogen festgestellt wurden. Damit wird die Verkehrssicherheit erhöht, insbesondere auch für automatisierte Fahrsysteme, die auf einen Fahrzeugführer als Rückfallebene angewiesen sind.
  • Gemäß einem weiteren Aspekt stellt die Erfindung ein System für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen bereit. Das System umfasst wenigstens einen ersten Sensor, der im Fahrzeuginnenraum Geruchsmoleküle in Atemluft und/oder aus Körpergeruch des Fahrzeuginsassen erfasst und in erste Signale umformt. Ferner umfasst das System wenigstens einen zweiten Sensor, der den Fahrzeuginsassen identifiziert. Außerdem umfasst das System eine erfindungsgemäße Verarbeitungseinheit, die über eine erste und zweite Schnittstelle jeweils mit dem ersten und zweiten Sensor Signal übertragend verbunden ist. Das System stellt über eine dritte Schnittstelle ein zweites Signal der Verarbeitungseinheit einer optischen, akustischen und/oder taktilen Informationseinheit oder einer Fahrzeugsteuerungseinheit bereit.
  • Gemäß einem weiteren Aspekt stellt die Erfindung ein computerimplementiertes Verfahren bereit zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen. Das Verfahren umfasst die Schritte
    • • Erhalten von ersten Signalen, die Geruchsmoleküle beschreiben,
    • • Erhalten einer Identifikation des Fahrzeuginsassen,
    • • Identifizieren von Gerüchen, die auf Drogen und/oder Krankheiten hinweisen, in Abhängigkeit der ersten Signale mittels eines ersten Maschinenlernalgorithmus, der trainiert ist, in Abhängigkeit der ersten Signale Gerüche umfassend Gerüche von Alkohol, Kokain, Amphetamine, Zigarettenrauch, Cannabis, Tetrahydrocannabinol, Morphin, Methadone, Ammoniak, Azeton oder eine Kombination dieser Substanzen zu identifizieren,
    • • in Abhängigkeit einer Position des Fahrzeuginsassen im Fahrzeuginnenraum Zuordnen der Gerüche zu der Identifikation des Fahrzeuginsassen,
    • • Erzeugen eines zweiten Signals bei einer positiven Zuordnung, und
    • • Bereitstellen des zweiten Signales wenigstens einer Fahrzeugeinheit,
    wobei zur Durchführung des Verfahrens eine erfindungsgemäße Verarbeitungseinheit oder ein erfindungsgemäßes System verwendet wird.
  • Gemäß einem weiteren Aspekt stellt die Erfindung ein Computerprogramm zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen bereit. Das Computerprogramm umfasst Befehle, die bewirken, dass eine erfindungsgemäße Verarbeitungseinheit ein erfindungsgemäßes Verfahren ausführt, wenn das Computerprogramm auf der Verarbeitungseinheit ausgeführt wird.
  • Weitere Ausgestaltungen der Erfindung ergeben sich aus den Unteransprüchen, den Zeichnungen und der Beschreibung bevorzugter Ausführungsbeispiele.
  • Der auf semantische Bildsegmentierung trainierte Maschinenlernalgorithmus klassifiziert zunächst das Lebewesen, das heißt, ob ein Mensch oder ein Tier, beispielsweise ein Hund, erfasst wurde. Daran folgend wird ein Körper des Lebewesen erkannt und Körperteile klassifiziert. Damit wird ein Body-Modell erhalten. Körperteile, die klassifiziert werden, umfassen Gesicht und Gliedmaße, beispielsweise Hände. Anschließend werden Merkmale des Gesichts oder der Gliedmaßen, beispielsweise der Händen, bestimmt.
  • Semantische Bildsegmentierung ermöglicht die Gesichtserkennung, Gliedmaßen-, beispielsweise Händeerkennung und Identifikation über Gesichtserkennung und/oder Gliedmaßen-, beispielsweise Händeerkennung. Beispielsweise segmentiert der erste oder zweite Maschinenlernalgorithmus aus dreidimensionalen Aufnahmen eines Fahrzeuginnenraums ein Gesicht eines Fahrzeuginsassen und ordnet diesem Aufnahmebereich die Bedeutung des Gesichts zu, analog für Gliedmaßen, beispielsweise Hände. In dem Gesicht werden weitere Elemente segmentiert und ihren jeweiligen Bedeutungen zugeordnet, beispielsweise Mund, Augen, Nase, Ohren, Stirn, Kinn und/oder Gesichtsmuskel und deren Anordnung untereinander. Im Fall von Händen werden Anzahl Finger, Länge und/oder Breite einzelner Finger, Fingernagelstruktur, Handflächengröße, Venenmuster von Handinnenfläche, des Handrückens oder die Fingervenen. Dies sind biometrische Merkmale, die den Fahrzeuginsassen identifizieren.
  • Nach einem Aspekt der Erfindung umfasst der Maschinenlernalgorithmus ein künstliches neuronales Netzwerk, das auf semantische Bildsegmentierung trainiert ist. Das künstliche neuronale Netzwerk ist beispielsweise ein Faltungsnetzwerk, beispielsweise ein VGG Net, siehe K. Simonyan et al., „Very Deep Convolutional Networks For Large-Scale Image Recognition“, arXiv:1409.1556v6 [cs.CV]. Das künstliche neuronale Netzwerk wird nach einem Aspekt der Erfindung mittels überwachtem Lernen trainiert. Damit ist der Lernprozess besser nachvollziehbar als beim unüberwachten Lernen, was vorteilhaft für die Validierung und Absicherung der Verarbeitungseinheit ist.
  • Nach einem weiteren Aspekt der Erfindung umfasst der Maschinenlernalgorithmus einen Random-Forest-Klassifikator umfassend unkorrelierte Entscheidungsbäume, die nach einer bestimmten Randomisierung während eines Lernprozesses wachsen. Für eine Klassifikation darf jeder Baum in diesem Wald eine Entscheidung treffen und die Klasse mit den meisten Stimmen entscheidet die endgültige Klassifikation. Vorteile des Random Forest sind insbesondere, dass er relativ schnell trainiert aufgrund kurzen Trainings- und/oder Aufbauzeiten eines einzelnen Entscheidungsbaums, dass Evaluierungen aufgrund mehrerer Bäume parallelisierbar sind und dass wichtige Klassen, wie zum Beispiel für Gesichtserkennung oder Gliedmaßen- beispielsweise Handerkennung, erkannt werden können.
  • Nach einem weiteren Aspekt der Erfindung umfasst der Maschinenlernalgorithmus einen Support-Vector-Machine-Klassifikator, die eine Menge von Objekten derart in Klassen unterteilt, dass um Klassengrenzen herum ein möglichst breiter Bereich frei von Objekten bleibt.
  • Nach einem weiteren Aspekt der Erfindung wird der Maschinenlernalgorithmus, beispielsweise das künstliches neuronales Netzwerk auf dem erfindungsgemäßen Computer auf semantische Bildsegmentierung trainiert. Für das Training ist es vorteilhaft, dass der Computer eine Mikroarchitektur zum parallelisierten Ausführen von Prozessen umfasst, um das künstliche neuronale Netzwerk mit einer großen Anzahl an Daten zeiteffizient trainieren zu können. Graphikprozessoren umfassen eine derartige Mikroarchitektur. Das trainierte Netz wird nach einem Aspekt der Erfindung auf dem Computer ausgeführt.
  • Nach einem weiteren Aspekt der Erfindung ist die Verarbeitungseinheit in ein Fahrzeug oder in ein Bordnetz eines Fahrzeuges integriert. Nach einem Aspekt der Erfindung sind der erste und der zweite Sensor in das Bordnetz integriert. Damit wird die Kommunikation zwischen den Sensoren, der Verarbeitungseinheit und der Fahrzeugsteuerung erleichtert. Das Bordnetz ist beispielsweise ein CAN-Bus. Zumindest ein Teil der Kommunikation zwischen den Sensoren, der Verarbeitungseinheit und der Fahrzeugsteuerung erfolgt nach einem Aspekt der Erfindung kabellos, beispielsweise mittels Bluetooth Low Energy, ANT oder ANT+, oder einem anderen Funknetzstandard, beispielsweise für das 868 MHz-Band, für das erkannt wurde, das relativ hohe Energiedichten übertragen werden können. Beispielsweise erfolgt die Kommunikation zwischen den Sensoren und zwischen den Sensoren und der Verarbeitungseinheit kabellos. Nach einem Aspekt der Erfindung erfolgt die Kommunikation zwischen der Verarbeitungseinheit und der Fahrzeugsteuerung kabelgebunden, um die Betriebssicherheit und zu erhöhen und Cyberangriffe besser abwehren zu können.
  • In einer Ausgestaltung des Systems ist der erste Sensor ein Fahrzeug-Lidarsensor. Der Fahrzeug-Lidarsensor ist ausgeführt, Geruchsmoleküle in Abhängigkeit von aus dem Fahrzeuginnenraum zurückgestreutem Licht zu erfassen.
  • Ein Fahrzeug-Lidarsensor ist ein Lidarsensor, der für die Verwendung im Fahrzeug-Umfeld, beispielsweise im Fahrzeuginnenraum, geeignet ist. Beispielsweise senden Fahrzeug-Lidarsensoren Laserimpulse mit Wellenlängen im Infrarotbereich aus, die für einen Menschen nicht schädlich sind.
  • Beispielsweise umfasst der Fahrzeug-Lidarsensor einen CCD oder CMOS Chip mit integrierter Auswertungselektronik für Spektroskopie, beispielsweise Raman-Spektroskopie. Beispielsweise werden aus den Signalen der Pixel des CCD oder CMOS Chips Lichtwellenlängen des zurückgestreuten Lichts, umfassend elastische Rückstreuung durch die Geruchsmoleküle, bestimmt, anhand derer die Geruchsmoleküle erfasst werden.
  • In einer weiteren Ausgestaltung des Systems ist der Fahrzeug-Lidarsensor ausgeführt, mehrere Lichtpulse unterschiedlicher Wellenlänge auszusenden und für jede der Wellenlängen die Geruchsmoleküle aus dem zurückgestreuten Licht zu erfassen. Der Fahrzeug-Lidarsensor umfasst nach einem Aspekt der Erfindung eine Ansteuerelektronik, um unterschiedliche Wellenlängen auszusenden.
  • Beispielsweise ist der Fahrzeug-Lidarsensor ausgeführt, zwei Lichtpulse unterschiedlicher Wellenlänge auszusenden. Dabei wird nach einem Aspekt der Erfindung eine erste Wellenlänge derart gewählt, dass sie von der Substanz, deren Konzentration bestimmt werden soll, absorbiert wird. Die zweite Wellenlänge wird derart gewählt, dass sie nicht oder möglichst wenig absorbiert wird. Damit wird aus dem schrittweisen Vergleich der Rückstreusignale bei der ersten und der zweiten Wellenlänge mittels differentieller Absorption auf ein Konzentrationsprofil der Substanz berechnet. Damit wird dann vorteilhafterweise im Fahrzeuginnenraum beispielsweise auch eine Konzentration von Alkoholmolekülen in der Atemluft oder des Körpergeruchs des Fahrzeuginsassen bestimmt.
  • In einer weiteren Ausgestaltung des Systems umfasst der Fahrzeug-Lidarsensor einen Güteschalter. Mit dem Güteschalter, auch Q-Switch genannt, werden die Lichtpulse kürzer. Damit werden auch bei vergleichsweise geringen Energien hohe Spitzenleistungen erreicht. Durch die geringen Energien wird erreicht, dass der Fahrzeug-Lidarsensor unschädlich für den Fahrzeugführer ist. Durch hohe Spitzenleistungen werden Geruchsmoleküle auflösbar. Der Güteschalter ist beispielsweise ein elektrooptischer Modulator.
  • Nach einem weiteren Aspekt der Erfindung ist der Fahrzeug-Lidarsensor eingehaust.
  • In einer weiteren Ausgestaltung des Systems ist der zweite Sensor ein 2D oder 3D Kamerasensor, Radarsensor oder Lidarsensor. Das System ist ausgeführt, die Identifikation des Fahrzeuginsassen aus einer Gesichtserkennung des Fahrzeuginsassen zu erhalten. Der 3D Kamerasensor ist beispielsweise ein time-of-flight Sensor.
  • Dabei wird beispielsweise eine dreidimensionale Geometrie des Gesichts über ein Lichtlaufzeitverfahren, basierend auf dem der zweite Sensor arbeitet, bestimmt.
  • Nach einem weiteren Aspekt der Erfindung wird die dreidimensionale Geometrie des Gesichts mittels strukturiertem Licht, im Englischen structured lightning, bestimmt.
  • Structured Lightning wird beispielsweise mit einem 3D Kamerasensor oder einem Lidarsensor realisiert.
  • In einer weiteren Ausgestaltung des Systems umfasst das System einen Sensor, der Funktionalitäten des ersten und zweiten Sensors vereint, wobei der Sensor ein Lichtlaufzeit-Sensor ist, die ersten Signale aus von aus dem Fahrzeuginnenraum zurückgestreutem Licht des Sensors resultieren und die Identifikation des Fahrzeuginsassen aus Lichtlaufzeiten von Lichtimpulsen des Sensors zu einer Körperoberfläche, beispielsweise Gesichtsoberfläche, des Fahrzeuginsassen resultiert. Der Sensor ist beispielsweise eine time-of-flight Kamera oder ein Fahrzeug- Lidarsensor.
  • Es sind Fahrzeugsysteme bekannt umfassend ein Innenraumüberwachungssystem zur Überwachung eines Aufmerksamkeitszustandes eines Fahrzeugführers und zur Überwachung von Sicherheitssystemen, beispielsweise angelegten Sicherheitsgurten. Derartige Innenraumüberwachungssysteme umfassen eine time-of-flight Kamera oder ein Fahrzeug- Lidarsensor. Die Erfindung schlägt vor, diese Systeme derart zu konfigurieren, dass Gerüche, die auf Drogen und/oder Krankheiten hinweisen, in Atemluft und/oder Körperausdünstungen von Fahrzeuginsassen mittels diesen Systemen wahrgenommen werden, um gegebenenfalls ein Losfahren des Fahrzeuges zu verhindern. Damit sind keine Zusatzsysteme erforderlich, um beispielsweise eine alkoholempfindliche Wegfahrsperre bereitzustellen.
  • In einer weiteren Ausgestaltung des Systems erfasst der zweite Sensor einzelne Gliedmaßen. Das System ist ausgeführt, den Fahrzeuginsassen in Abhängigkeit der erfassten Gliedmaßen zu identifizieren. Beispielsweise werden von einer Kamera Hände erfasst. Das System unterscheidet dann zwischen den Händen des Fahrzeugführers und den Händen eines Beifahrers. Damit wird einem Missbrauch weiter vorgebeugt. Dies ist insbesondere dann von Vorteil, wenn der erste Sensor ein Finger-Alkohol-Messgerät ist, auf das ein Finger einer Hand aufgesetzt wird, angestrahlt wird und die Blutalkoholkonzentration basierend auf Reflexionen oder anderen Lichtwechselwirkungen bestimmt wird.
  • In einer weiteren Ausgestaltung des Systems ist bei Verwendung in dem Fahrzeuginnenraum der erste Sensor an einem Fahrzeuglenkrad oder in einem Bereich eines Armaturenbretts und der zweite Sensor oder der Sensor an dem Fahrzeuglenkrad, in einem Bereich des Armaturenbretts, in einem Bereich einer Windschutzscheibe des Fahrzeuges oder in einem Bereich eines Fahrzeughimmels angeordnet.
  • In einer weiteren Ausgestaltung des Systems ist der erste Sensor ein Fahrzeug-Lidarsensor, ausgeführt, Geruchsmoleküle in Abhängigkeit von aus dem Fahrzeuginnenraum zurückgestreutem Licht zu erfassen und der zweite Sensor ein CCD oder CMOS Sensor zur Spektroskopie des zurückgestreuten Lichts. Beispielsweise ist der zweite Sensor ein time-of-flight Sensor eines Innenraumüberwachungssystems.
  • In einer weiteren Ausgestaltung des Systems ist das zweite Signal ein Steuerungssignal für eine Wegfahrsperre des Fahrzeuges und die dritte Schnittstelle stellt das zweite Signal der Wegfahrsperre bereitstellt oder das zweite Signal ist ein Steuerungssignal ist und leitet einen Fail-Safe oder Fail-Operational Zustand für das Fahrzeug ein. Im Falle von erkanntem Alkohol in Atemluft und/oder Körpergeruch, oder bei Überschreiten eines Schwellenwertes, beispielsweise einem gesetzlichen Grenzwertes, stellt die Erfindung damit eine alkoholempfindliche Wegfahrsperre oder einen verbesserten Alcolock bereit. Fail-Safe bedeutet, dass beispielsweise ein Anfahren des Fahrzeuges nicht erfolgt, wenn Gerüche des Fahrzeugführers erkannt wurden, die auf Drogen und/oder Krankheit hinweisen. Fail-Operational bedeutet, dass beispielsweise das Fahrzeug operativ bleibt und weiterfährt, bis sich eine sichere Anhaltemöglichkeit ergibt, wenn während einer Fahrt Gerüche des Fahrzeugführers erkannt wurden, die auf Drogen und/oder Krankheit hinweisen.
  • In einer weiteren Ausgestaltung des Systems umfasst das System einen Speicher und/oder Kommunikationsmittel, um identifizierte Gerüche von Drogen und/oder Krankheiten zu speichern und/oder einem Unternehmen, dem das Fahrzeug gehört oder einer Regierungsbehörde eine Information über die identifizierten Gerüche bereitzustellen. Damit kann das Unternehmen oder die Regierungsbehörde eines ihrer Fahrzeuge remote anhalten oder in einen Fail-Operational Zustand überführen.
  • Ferner werden damit Fahrzeugführer, die bei dem Unternehmen angestellt sind, oder von Regierungsbehörden hinsichtlich Fahrtüchtigkeit überwacht.
  • Die Erfindung wird in den folgenden Ausführungsbeispielen verdeutlicht. Es zeigen:
    • 1 ein aus dem Stand bekannter Alkoholtester,
    • 2 ein Ausführungsbeispiel eines erfindungsgemäßen Systems in einem Fahrzeuginnenraum,
    • 3 ein Ausführungsbeispiel einer erfindungsgemäßen Verarbeitungseinheit,
    • 4 eine schematische Darstellung eines erfindungsgemäßen Systems,
    • 5 eine schematische Darstellung eines weiteren erfindungsgemäßen Systems und
    • 6 eine schematische Darstellung eines Ausführungsbeispiels eines erfindungsgemäßen Verfahrens.
  • In den Figuren bezeichnen gleiche Bezugszeichen gleiche oder funktionsähnliche Bezugsteile. Übersichtshalber werden in den einzelnen Figuren nur die jeweils relevanten Bezugsteile hervorgehoben.
  • 1 zeigt als Fahrzeuginsassen F einen Fahrzeugführer, der eine Atemprobe in ein Handgerät abgibt. Das Handgerät misst die Alkoholkonzentration des eingeblasenen Alkohols. Falls der gemessene Wert über einem Schwellenwert, beispielsweise einem gesetzlichen Grenzwert liegt, wird ein Anlasser des Fahrzeuges blockiert. Das Fahrzeug kann dann nicht anfahren. Das Handgerät ist relativ unkomfortabel. Ferner muss der Fahrzeugführer zusätzliche Handbewegungen und/oder Handgriffe ausführen zur Bedienung des Handgeräts, bevor er losfahren kann.
  • Das erfindungsgemäße System 20 ist in 2 in einen Fahrzeuginnenraum integriert. 4 zeigt das System 20 schematisch. Das System 20 umfasst beispielsweise einen ersten Sensor 21. Der erste Sensor 21 ist in ein Fahrzeuglenkrad integriert und ausgeführt, Geruchsmoleküle in Atemluft und/oder aus Körpergeruch des Fahrzeuginsassen F zu detektieren. Ferner umfasst das System 20 zweite Sensoren 22, die ein Gesicht des Fahrzeugführers identifizieren mittels softwarebasierter Gesichtserkennung. Einer der zweiten Sensoren 22 ist beispielsweise im Bereich eines Rückspiegels im Fahrzeuginnenraum angeordnet und ist beispielsweise eine time-of-flight Kamera. Der andere der zweiten Sensoren 22 ist im Armaturenbrett integriert und umfasst beispielsweise einen Kamera-, Lidar- oder Radar-Sensor. Das System 20 umfasst eine Verarbeitungseinheit 10 wie in 3 gezeigt.
  • Die Verarbeitungseinheit 10 erhält über eine erste Schnittstelle 11 Signale des ersten Sensors 21. Über eine zweite Schnittstelle 12 erhält die Verarbeitungseinheit1 0 Signale des oder der zweiten Sensoren 22. In Abhängigkeit der Signale bestimmt die Verarbeitungseinheit in der Atemluft und/oder in Körpergerüchen des Fahrzeuginsassen, der Atemluft in Richtung des Fahrzeuglenkrads abgibt, Gerüche, die beispielsweise auf Alkoholkonsum hinweisen. Die Gerüche oder die für die Gerüche relevanten Substanzen werden mittels Maschinenlernverfahren bestimmt. Ferner verknüpft die Verarbeitungseinheit die Gerüche mit der Identität des Fahrzeuginsassen, um einen Betrug oder Missbrauch des Systems 20 vorzubeugen. Wird dabei beispielsweise erkannt, dass die Alkoholkonzentration in der Atemluft des Fahrzeugführers einen gesetzlichen Grenzwert übersteigt, erzeugt die Verarbeitungseinheit 10 ein zweites Signal. Das zweite Signal wird beispielsweise über eine dritte Schnittstelle 13 der Verarbeitungseinheit 10 einer Fahrzeugsteuerung ECU bereitgestellt. Das zweite Signal veranlasst die Fahrzeugsteuerung, dass ein Motorstart und/oder Getriebestart des Fahrzeuges unterbleibt. Die Fahrzeugsteuerung ECU ist beispielsweise ein elektronisches Steuergerät.
  • 5 zeigt das System in der Ausführungsform mit nur einem Sensor, beispielsweise einem time-of-flight Sensor oder einem Lidarsensor. Der eine Sensor übernimmt dabei die Funktionalitäten des ersten Sensors 21 und des zweiten Sensors 22.
  • Das erfindungsgemäße Verfahren ist in 6 gezeigt. In einem Verfahrensschritt V1 werden erste Signale, die Geruchsmoleküle beschreiben, erhalten. In einem Verfahrensschritt V2 wird eine Identifikation des Fahrzeuginsassen erhalten. In einem Verfahrensschritt V3 werden Gerüchen identifiziert, die auf Drogen und/oder Krankheiten hinweisen in Abhängigkeit der ersten Signale mittels eines ersten Maschinenlernalgorithmus, der trainiert ist, in Abhängigkeit der ersten Signale Gerüche umfassend Gerüche von Alkohol, Kokain, Amphetamine, Zigarettenrauch, Cannabis, Tetrahydrocannabinol, Morphin, Methadone, Ammoniak, Azeton oder eine Kombination dieser Substanzen zu identifizieren. In einem Verfahrensschritt V4 werden in Abhängigkeit einer Position des Fahrzeuginsassen F im Fahrzeuginnenraum die Gerüche der Identifikation des Fahrzeuginsassen zugeordnet. In einem Verfahrensschritt V5 wird ein zweites Signal bei einer positiven Zuordnung erzeugt. In einem Verfahrensschritt V6 wird das zweite Signal wenigstens einer Fahrzeugeinheit bereitgestellt.
  • Das Verfahren wird mit der Verarbeitungseinheit 10 oder dem System 20 durchgeführt.
  • Bezugszeichenliste
    • F
    Fahrzeuginsasse
    10
    Verarbeitungseinheit
    11
    erste Schnittstelle
    12
    zweite Schnittstelle
    13
    dritte Schnittstelle
    20
    System
    21
    erster Sensor
    22
    zweiter Sensor
    ECU
    Fahrzeugsteuerung
    V1-V6
    Verfahrensschritte
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • US 2019/0227042 A1 [0002]

Claims (15)

  1. Verarbeitungseinheit (10) für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen (F) umfassend • eine erste Schnittstelle (11) zu einem ersten Sensor (21), der in einem Fahrzeuginnenraum Geruchsmoleküle in Atemluft und/oder aus Körpergeruch des Fahrzeuginsassen (F) erfasst und in erste Signale umformt, um die ersten Signale zu erhalten, wobei die ersten Signale aus einer Lichtwechselwirkung resultieren oder Frequenzen und/oder Amplituden von Schwingungen umfassen, • eine zweite Schnittstelle (12) zu einem zweiten Sensor (22), der den Fahrzeuginsassen (F) identifiziert, um eine Identifikation des Fahrzeuginsassen (F) zu erhalten, • wobei die Verarbeitungseinheit (10) Befehle ausführt, die bewirken, dass die Verarbeitungseinheit (10) in Abhängigkeit einer Position des Fahrzeuginsassen (F) im Fahrzeuginnenraum Gerüche des Fahrzeuginsassen (F), die auf Drogen und/oder Krankheiten hinweisen, der Identifikation des Fahrzeuginsassen (F) zuordnet und bei einer positiven Zuordnung ein zweites Signal erzeugt, wobei die Befehle einen ersten Maschinenlernalgorithmus umfassen, der trainiert ist, in Abhängigkeit der ersten Signale Alkohol, Kokain, Amphetamine, Zigarettenrauch, Cannabis, Tetrahydrocannabinol, Morphin, Methadone, Ammoniak, Azeton oder eine Kombination dieser Substanzen in den Gerüchen des Fahrzeuginsassen (F) zu identifizieren, und · eine dritte Schnittstelle (13) zu wenigstens einer Fahrzeugeinheit, um dem Fahrzeuginsassen (F) und/oder einer Fahrzeugsteuerung (ECU) das zweite Signal bereitzustellen, wobei der erste Maschinenlernalgorithmus auf semantische Bildsegmentierung trainiert ist zur Identifikation des Fahrzeuginsassen (F) oder die Befehle einen zweiten Maschinenlernalgorithmus umfassen, der auf semantische Bildsegmentierung trainiert ist zur Identifikation des Fahrzeuginsassen (F).
  2. Verarbeitungseinheit (10) nach Anspruch 1, wobei der erste Maschinenlernalgorithmus ein olfaktorisches System von Säugern modelliert und/oder die Verarbeitungseinheit als neuromorpher Schaltkreis ausgeführt ist.
  3. Verarbeitungseinheit (10) nach Anspruch 1 oder 2, wobei die Verarbeitungseinheit (10) in ein Fahrzeug oder in ein Bordnetz eines Fahrzeuges integriert ist.
  4. System (20) für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen (F) umfassend • wenigstens einen ersten Sensor (21), der im Fahrzeuginnenraum Geruchsmoleküle in Atemluft und/oder aus Körpergeruch des Fahrzeuginsassen (F) erfasst und in erste Signale umformt, • wenigstens einen zweiten Sensor (22), der den Fahrzeuginsassen (F) identifiziert, und • eine Verarbeitungseinheit (10) nach einem der Ansprüche 1 bis 3, die über eine erste (11) und zweite Schnittstelle (12)jeweils mit dem ersten (21) und zweiten Sensor (22) Signal übertragend verbunden ist, wobei • das System (20) über eine dritte Schnittstelle (13) ein zweites Signal der Verarbeitungseinheit (10) einer optischen, akustischen und/oder taktilen Informationseinheit oder einer Fahrzeugsteuerungseinheit bereitstellt.
  5. System (20) nach Anspruch 4, wobei der erste Sensor (21) ein Fahrzeug-Lidarsensor ist, ausgeführt, Geruchsmoleküle in Abhängigkeit von aus dem Fahrzeuginnenraum zurückgestreutem Licht zu erfassen.
  6. System (20) nach Anspruch 5, wobei der Fahrzeug-Lidarsensor ausgeführt ist, mehrere Lichtpulse unterschiedlicher Wellenlänge auszusenden und für jede der Wellenlängen die Geruchsmoleküle aus dem zurückgestreuten Licht zu erfassen.
  7. System (20) nach Anspruch 4 oder 5, wobei der Fahrzeug-Lidarsensor einen Güteschalter umfasst.
  8. System (20) nach einem der Ansprüche 4 bis 7, wobei der zweite Sensor (22) ein 2D oder 3D Kamerasensor, Radarsensor oder Lidarsensor ist und das System ausgeführt, die Identifikation des Fahrzeuginsassen (F) aus einer Gesichtserkennung des Fahrzeuginsassen zu erhalten.
  9. System (20) nach einem der Ansprüche 4 bis 8, umfassend einen Sensor, der Funktionalitäten des ersten (21) und zweiten Sensors (22) vereint, wobei der Sensor ein Lichtlaufzeit-Sensor ist, die ersten Signale aus von aus dem Fahrzeuginnenraum zurückgestreutem Licht des Sensors resultieren und die Identifikation des Fahrzeuginsassen (F) aus Lichtlaufzeiten von Lichtimpulsen des Sensors zu einer Körperteiloberfläche des Fahrzeuginsassen (F) resultiert.
  10. System (20) nach Anspruch 8 oder 9, wobei der zweite Sensor einzelne Gliedmaßen erfasst und das System ausgeführt ist, den Fahrzeuginsassen in Abhängigkeit der erfassten Gliedmaßen zu identifizieren.
  11. System (20) nach einem der Ansprüche 4 bis 10, wobei bei Verwendung in dem Fahrzeuginnenraum der erste Sensor (21) an einem Fahrzeuglenkrad oder in einem Bereich eines Armaturenbretts und der zweite Sensor oder der Sensor an dem Fahrzeuglenkrad, in einem Bereich des Armaturenbretts, in einem Bereich einer Windschutzscheibe des Fahrzeuges oder in einem Bereich eines Fahrzeughimmels angeordnet ist.
  12. System (20) nach einem der Ansprüche 4 bis 11, wobei der erste Sensor (21) ein Fahrzeug-Lidarsensor ist, ausgeführt, Geruchsmoleküle in Abhängigkeit von aus dem Fahrzeuginnenraum zurückgestreutem Licht zu erfassen und der zweite Sensor (22) ein CCD oder CMOS Sensor zur Spektroskopie des zurückgestreuten Lichts ist.
  13. System (20) nach einem der Ansprüche 4 bis 12, wobei das zweite Signal ein Steuerungssignal für eine Wegfahrsperre des Fahrzeuges ist und die dritte Schnittstelle (13) das zweite Signal der Wegfahrsperre bereitstellt oder wobei das zweite Signal ein Steuerungssignal ist und einen Fail-Safe oder Fail-Operational Zustand für das Fahrzeug einleitet.
  14. System (20) nach einem der Ansprüche 4 bis 13, umfassend einen Speicher und/oder Kommunikationsmittel, um identifizierte Gerüche von Drogen und/oder Krankheiten zu speichern und/oder einem Unternehmen, dem das Fahrzeug gehört oder einer Regierungsbehörde eine Information über die identifizierten Gerüche bereitzustellen.
  15. Computerimplementiertes Verfahren zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen (F) umfassend die Schritte • Erhalten von ersten Signalen, die Geruchsmoleküle beschreiben (V1), • Erhalten einer Identifikation des Fahrzeuginsassen (V2), • Identifizieren von Gerüchen, die auf Drogen und/oder Krankheiten hinweisen, in Abhängigkeit der ersten Signale mittels eines ersten Maschinenlernalgorithmus, der trainiert ist, in Abhängigkeit der ersten Signale Gerüche umfassend Gerüche von Alkohol, Kokain, Amphetamine, Zigarettenrauch, Cannabis, Tetrahydrocannabinol, Morphin, Methadone, Ammoniak, Azeton oder eine Kombination dieser Substanzen zu identifizieren (V3), • in Abhängigkeit einer Position des Fahrzeuginsassen (F) im Fahrzeuginnenraum Zuordnen der Gerüche zu der Identifikation des Fahrzeuginsassen (F) (V4), • Erzeugen eines zweiten Signals bei einer positiven Zuordnung (V5), und • Bereitstellen des zweiten Signales wenigstens einer Fahrzeugeinheit (V6), wobei zur Durchführung des Verfahrens eine Verarbeitungseinheit (10) nach einem der Ansprüche 1 bis 3 oder ein System (20) nach einem der Ansprüche 4 bis 14 verwendet wird.
DE102020203584.9A 2020-03-20 2020-03-20 Verarbeitungseinheit, System, und computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen Pending DE102020203584A1 (de)

Priority Applications (4)

Application Number Priority Date Filing Date Title
DE102020203584.9A DE102020203584A1 (de) 2020-03-20 2020-03-20 Verarbeitungseinheit, System, und computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen
EP21712061.7A EP4120892A1 (de) 2020-03-20 2021-03-10 Verarbeitungseinheit, system, und computerimplementiertes verfahren für einen fahrzeuginnenraum zur wahrnehmung und reaktion auf gerüche eines fahrzeuginsassen
PCT/EP2021/055990 WO2021185645A1 (de) 2020-03-20 2021-03-10 Verarbeitungseinheit, system, und computerimplementiertes verfahren für einen fahrzeuginnenraum zur wahrnehmung und reaktion auf gerüche eines fahrzeuginsassen
US17/913,121 US20230127231A1 (en) 2020-03-20 2021-03-10 Processing unit, system, and computer-implemented method for a vehicle interior for detecting and reacting to odors of a vehicle occupant

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102020203584.9A DE102020203584A1 (de) 2020-03-20 2020-03-20 Verarbeitungseinheit, System, und computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen

Publications (1)

Publication Number Publication Date
DE102020203584A1 true DE102020203584A1 (de) 2021-09-23

Family

ID=74874810

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102020203584.9A Pending DE102020203584A1 (de) 2020-03-20 2020-03-20 Verarbeitungseinheit, System, und computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen

Country Status (4)

Country Link
US (1) US20230127231A1 (de)
EP (1) EP4120892A1 (de)
DE (1) DE102020203584A1 (de)
WO (1) WO2021185645A1 (de)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202023103780U1 (de) 2022-12-02 2023-08-09 Zf Friedrichshafen Ag Lenkerschalter zum Überwachen wenigstens eines Fahrzeugführers und Fahrzeug umfassend einen derartigen Lenkerschalter
SE2350184A1 (en) * 2022-02-18 2023-08-19 Zahnradfabrik Friedrichshafen Vehicle control element for measuring concentrations of substances in exhaled air and/or in body odor of vehicle occupants
DE102022201915A1 (de) 2022-02-24 2023-08-24 Zf Friedrichshafen Ag Steuergerät, Bausatz, Verfahren und Computerprogramm für ein Transportsystem zum gezielten Regeln und/oder Steuern einer Zu- und/oder Abluft und Transportsystem
DE102022201704A1 (de) 2022-02-18 2023-08-24 Zf Friedrichshafen Ag Gasanalyse-System für Fahrzeuge und Anordnung mehrerer derartiger Gasanalyse-Systemen
DE102022203044A1 (de) 2022-03-29 2023-10-05 Zf Friedrichshafen Ag Gasanalyse-System anordbar in einem Fahrzeuginnenraum und ausgelegt zum Bestimmen von Substanzen in Ausatemluft und/oder Körpergeruch von Fahrzeuginsassen
DE102022204281A1 (de) 2022-05-02 2023-11-02 Zf Friedrichshafen Ag Verfahren zur Analyse einer Menge eines innerhalb eines Fahrzeugs vorliegenden Gases, Verwendung von analytischen Daten und Verwendung einer Analyseeinrichtung sowie Analyseeinrichtung, Analysesystem und Fahrzeug
WO2024115475A1 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Anordnung wenigstens eines systems in einem innenraum eines fahrzeuges zum überwachen eines zustandes wenigstens eines fahrzeuginsassen
WO2024115622A1 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Lenkstockschalter zum überwachen wenigstens eines fahrzeuginsassen und fahrzeug umfassend einen derartigen lenkstockschalter
WO2024115480A1 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Fahrzeuginsassen- überwachungssystem und fahrzeug umfassend ein fahrzeuginsassen-überwachungssystem

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112014000934T5 (de) 2013-02-21 2016-01-07 Iee International Electronics & Engineering S.A. Bildgebungsgestütztes Insassenüberwachungssystem mit breit gefächerter Funktionsunterstützung
DE102015222444A1 (de) 2014-12-11 2016-06-16 Hyundai Motor Company Vorrichtung und Verfahren zum Beurteilen einer Geruchswahrnehmung
US20170131261A1 (en) 2015-11-05 2017-05-11 GM Global Technology Operations LLC Method and system for controlling a passive driver impairment detection system in a vehicle
DE102017120978A1 (de) 2016-09-13 2018-03-15 Ford Global Technologies, Llc Fahrgastüberwachungssysteme und -verfahren
US10160457B1 (en) 2015-09-02 2018-12-25 State Farm Mutual Automobile Insurance Company Vehicle occupant monitoring using infrared imaging
US20190227042A1 (en) 2016-09-27 2019-07-25 Aroma Bit, Inc. Odor measurement apparatus and odor data management apparatus

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101821120B (zh) * 2007-10-10 2013-11-06 B.E.S.T实验室股份有限公司 具有对用户的实时验证的生物测定学脸部识别的呼吸酒精点火互锁设备
US8686864B2 (en) * 2011-01-18 2014-04-01 Marwan Hannon Apparatus, system, and method for detecting the presence of an intoxicated driver and controlling the operation of a vehicle

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112014000934T5 (de) 2013-02-21 2016-01-07 Iee International Electronics & Engineering S.A. Bildgebungsgestütztes Insassenüberwachungssystem mit breit gefächerter Funktionsunterstützung
DE102015222444A1 (de) 2014-12-11 2016-06-16 Hyundai Motor Company Vorrichtung und Verfahren zum Beurteilen einer Geruchswahrnehmung
US10160457B1 (en) 2015-09-02 2018-12-25 State Farm Mutual Automobile Insurance Company Vehicle occupant monitoring using infrared imaging
US20170131261A1 (en) 2015-11-05 2017-05-11 GM Global Technology Operations LLC Method and system for controlling a passive driver impairment detection system in a vehicle
DE102017120978A1 (de) 2016-09-13 2018-03-15 Ford Global Technologies, Llc Fahrgastüberwachungssysteme und -verfahren
US20190227042A1 (en) 2016-09-27 2019-07-25 Aroma Bit, Inc. Odor measurement apparatus and odor data management apparatus

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE2350184A1 (en) * 2022-02-18 2023-08-19 Zahnradfabrik Friedrichshafen Vehicle control element for measuring concentrations of substances in exhaled air and/or in body odor of vehicle occupants
DE102022201704A1 (de) 2022-02-18 2023-08-24 Zf Friedrichshafen Ag Gasanalyse-System für Fahrzeuge und Anordnung mehrerer derartiger Gasanalyse-Systemen
DE102022201915A1 (de) 2022-02-24 2023-08-24 Zf Friedrichshafen Ag Steuergerät, Bausatz, Verfahren und Computerprogramm für ein Transportsystem zum gezielten Regeln und/oder Steuern einer Zu- und/oder Abluft und Transportsystem
WO2023160987A1 (de) 2022-02-24 2023-08-31 Zf Friedrichshafen Ag Steuergerät, bausatz, verfahren und computerprogramm für ein transportsystem zum gezielten regeln und/oder steuern einer zu- und/oder abluft und transportsystem
DE102022203044A1 (de) 2022-03-29 2023-10-05 Zf Friedrichshafen Ag Gasanalyse-System anordbar in einem Fahrzeuginnenraum und ausgelegt zum Bestimmen von Substanzen in Ausatemluft und/oder Körpergeruch von Fahrzeuginsassen
DE102022204281A1 (de) 2022-05-02 2023-11-02 Zf Friedrichshafen Ag Verfahren zur Analyse einer Menge eines innerhalb eines Fahrzeugs vorliegenden Gases, Verwendung von analytischen Daten und Verwendung einer Analyseeinrichtung sowie Analyseeinrichtung, Analysesystem und Fahrzeug
WO2023213483A1 (de) 2022-05-02 2023-11-09 Zf Friedrichshafen Ag Bestimmung der anwesenheit von gasförmigen schwefelhaltigen verbindungen in der ausatemluft von fahrzeuginsassen
DE202023103780U1 (de) 2022-12-02 2023-08-09 Zf Friedrichshafen Ag Lenkerschalter zum Überwachen wenigstens eines Fahrzeugführers und Fahrzeug umfassend einen derartigen Lenkerschalter
WO2024115475A1 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Anordnung wenigstens eines systems in einem innenraum eines fahrzeuges zum überwachen eines zustandes wenigstens eines fahrzeuginsassen
DE102022212999B3 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Lenkstockschalter zum Überwachen wenigstens eines Fahrzeuginsassen und Fahrzeug umfassend einen derartigen Lenkstockschalter
WO2024115622A1 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Lenkstockschalter zum überwachen wenigstens eines fahrzeuginsassen und fahrzeug umfassend einen derartigen lenkstockschalter
DE102022212997B3 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Anordnung wenigstens eines Systems in einem Innenraum eines Fahrzeuges zum Überwachen eines Zustandes wenigstens eines Fahrzeuginsassen
WO2024115480A1 (de) 2022-12-02 2024-06-06 Zf Friedrichshafen Ag Fahrzeuginsassen- überwachungssystem und fahrzeug umfassend ein fahrzeuginsassen-überwachungssystem
DE102022212996A1 (de) 2022-12-02 2024-06-13 Zf Friedrichshafen Ag Fahrzeuginsassen- Überwachungssystem und Fahrzeug umfassend ein Fahrzeuginsassen-Überwachungssystem

Also Published As

Publication number Publication date
EP4120892A1 (de) 2023-01-25
WO2021185645A1 (de) 2021-09-23
US20230127231A1 (en) 2023-04-27

Similar Documents

Publication Publication Date Title
DE102020203584A1 (de) Verarbeitungseinheit, System, und computerimplementiertes Verfahren für einen Fahrzeuginnenraum zur Wahrnehmung und Reaktion auf Gerüche eines Fahrzeuginsassen
DE112019001601T5 (de) Sicherheitsverbessertes computergestütztes-fahren-verfahren und -vorrichtung
DE102013210050B4 (de) Neurokognitive Verarbeitung eines Fahrerzustands
Yang et al. Comparison among driving state prediction models for car-following condition based on EEG and driving features
DE102007046037B3 (de) Vorrichtung zur Erhöhung der Sicherheit im Straßenverkehr
DE102015109832A1 (de) Objektklassifizierung für Fahrzeugradarsysteme
EP3947086B1 (de) Verfahren und einrichtung zur überwachung eines fahrbetriebsbedingten gesundheitszustandes von insassen eines insbesondere autonomen fahrzeugs
DE102021003489A1 (de) Verfahren zur Erkennung einer graduell abnehmenden fahrerischen Leistungsfähigkeit eines Fahrzeugführers
DE102021005092A1 (de) Verfahren und Vorrichtung zur Erkennung von Emotionszuständen von Insassen eines Fahrzeuges
DE102018132868A1 (de) Warnsystem und Warnverfahren für ein Fahrzeug
DE102007050254B4 (de) Verfahren zum Herstellen eines Kollisionsschutzsystems für ein Kraftfahrzeug
DE102019210929B4 (de) Computerimplementiertes Verfahren zum maschinellen Lernen von Husten- und/oder Niesgeräuschen von ein Beförderungsmittel nutzenden Fahrgästen, um bei erkannten Husten- und/oder Niesgeräuschen Maßnahmen zur Reinigung des Beförderungsmittels einzuleiten, und Steuergerät, Verfahren, Vorrichtung, Beförderungsmittel und Computerprogramm zum Einleiten der Maßnahmen
DE102019133469B3 (de) Verfahren zum Betreiben eines Rückhaltesystems für ein Kraftfahrzeug sowie System zum Durchführen eines derartigen Verfahrens
EP3690827A1 (de) Verfahren, steuerung und kraftfahrzeug
DE102008038859A1 (de) System zur Erfassung der Wahrnehmung eines Menschen
DE102019208979A1 (de) Steuergerät zum Einsatz in einem Kraftfahrzeug
DE102008038855B4 (de) System zur Erkennung einer Gefahrensituation
DE102019208970A1 (de) Steuergerät zum Einsatz in einem Kraftfahrzeug
DE102019119253A1 (de) Assistenzsystem zur schallabhängigen Erkennung von Objekten im Straßenverkehr und einer Warnfunktion
DE102018113518A1 (de) Fahrzeugfahrer-Arbeitsbelastungsmanagement
DE102021003598A1 (de) Verfahren zum automatischen Erkennen von fahrsicherheitsrelevanten Handlungen von Fahrzeuginsassen mindestens eines Kraftfahrzeugs sowie Kraftfahrzeug zur Durchführung dieses Verfahrens
DE102013224917A1 (de) Verfahren zum Erfassen einer die Aufmerksamkeit eines Fahrers beschreibenden Aufmerksamkeitsgröße
DE112017003626T5 (de) Biologisches informationsspeichersystem und fahrzeuginterne biologische informationsspeichervorrichtung
DE102019203080A1 (de) Verfahren und System zum Bestimmen eines Kinetosezustandes einer Person, wobei die Person ein Fahrzeuginsasse ist
Fu et al. Decoding Passenger's EEG Signals From Encountering Emergency Road Events

Legal Events

Date Code Title Description
R163 Identified publications notified
R012 Request for examination validly filed