DE102018107326A1 - Adaptives Insassengespräch-Frühwarnsystem - Google Patents

Adaptives Insassengespräch-Frühwarnsystem Download PDF

Info

Publication number
DE102018107326A1
DE102018107326A1 DE102018107326.7A DE102018107326A DE102018107326A1 DE 102018107326 A1 DE102018107326 A1 DE 102018107326A1 DE 102018107326 A DE102018107326 A DE 102018107326A DE 102018107326 A1 DE102018107326 A1 DE 102018107326A1
Authority
DE
Germany
Prior art keywords
vehicle
early warning
warning system
dynamic call
sound data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102018107326.7A
Other languages
English (en)
Inventor
Kwaku O. Prakah-Asante
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of DE102018107326A1 publication Critical patent/DE102018107326A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096725Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information generates an automatic action on the vehicle control
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54Audio sensitive means, e.g. ultrasound
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2710/00Output or target parameters relating to a particular sub-units
    • B60W2710/30Auxiliary equipments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00Signal processing covered by H04R, not provided for in its groups
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/13Acoustic transducers and sound field adaptation in vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Traffic Control Systems (AREA)
  • Emergency Alarm Devices (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Dynamisches Gesprächsfrühwarnsystem, das zumindest ein Mikrofon beinhaltet, das Schalldaten in einer Innenfahrgastzelle eines Fahrzeugs aufnimmt. Ein Innenraum-Gesprächsschwellenwertanalysator (ICTA) analysiert Schalldaten innerhalb eines vorbestimmten Frequenzbereichs. Der ICTA stellt fest, ob die Schalldaten innerhalb des vorbestimmten Frequenzbereichs einen Schwellenwert überschreiten. Eine Einheit zur Empfindlichkeitsentscheidungsanpassung (SDT) konfiguriert einem Benutzerprofil zugeordnete Fahrzeugeinstellungen neu, wenn die Schalldaten den Schwellenwert überschreiten. Die jeweils neu konfigurierte Fahrzeugeinstellung wird genutzt, um als Reaktion auf eine Betätigung des Fahrzeugsystems einen Fahreralarmierungsvorgang eines Fahrzeugsystems zu aktivieren.

Description

  • STAND DER TECHNIK
  • Die vorliegende Erfindung betrifft im Allgemeinen dynamische Fahrer-Frühwarnsysteme.
  • Wenn ein junger Fahrer, ein älterer Fahrer oder ein Fahranfänger ein Fahrzeug fährt, muss der Fahrer besonders aufmerksam sein und darf nicht die Konzentration auf die Aufgabe des Fahrens und andere äußere Bedingungen verlieren, während er das Fahrzeug fährt. Verschiedene Ereignisse wie z. B. laute Musik sowie Fahrzeuginsassen können zu den Ablenkungen des Fahrers beitragen. Zum Beispiel können laute oder lebhafte Gespräche nicht nur zum Konzentrationsverlust hinsichtlich der Aufgabe des Fahrens führen, sondern können auch verhindern, dass der Fahrer schnell auf vom Fahrzeug ausgegebene Fahrzeugwarnungen reagiert, insbesondere, wenn er mit Fahrmanövern beschäftigt ist, die eine erhöhte Aufmerksamkeit und eine schnelle Reaktion vom Fahrer erfordern können. Vor allem bei Fahrern, bei denen die Aufmerksamkeit ein Problem sein kann oder die leicht abgelenkt werden können, ist allgemein bekannt, dass die Anwesenheit anderer Insassen wie zum Beispiel Teenagern, bei denen lebhafte Gespräche wahrscheinlich sind, der Konzentration und Aufmerksamkeit abträglich sein kann. Bei anhaltenden lebhaften Gesprächen ist es für einen Fahrer wichtig, von diesen Gesprächen nicht abgelenkt zu werden und seine Aufmerksamkeit wieder auf das Fahrereignis zu lenken. Es sind Techniken bekannt, um einen Fahrer dabei zu unterstützen, seine Konzentration und Aufmerksamkeit wieder auf die befahrene Straße zu lenken, aber solche Systeme behandeln oft alle Fahrer gleich und wenden möglicherweise dieselben Techniken an.
  • KURZDARSTELLUNG DER ERFINDUNG
  • Ein Vorteil der hier beschriebenen Ausführungsformen besteht in einem Innenraum-Gesprächsschwellenwertanalysator (Interior Conversational Threshold Analyzer, ICTA)-System, um einen spezifischen Frequenzbereich zu analysieren, der mit Gesprächsschallsignalen im Fahrzeug in Verbindung steht. Der ICTA analysiert jeweilige Schalldaten der Gesprächsschallsignale, die in einem vorbestimmten Frequenzband liegen, um festzustellen, ob die analysierten Schalldaten einen vorbestimmten Schwellenwertüberschreiten, um festzustellen, ob der Fahrer an Gesprächen teilnimmt, welche die Konzentration des Fahrers von der Aufgabe des Fahrens ablenken können. Das hier beschriebene System und die hier beschriebenen Techniken ermöglichen es einer verantwortlichen Person, die vorzugsweise nicht der Fahrer ist, ein Benutzerprofil für den Fahrer im ICTA einzustellen, sodass typische Fahrzeug-Subsystemeinstellungen an diesen Fahrer angepasst werden können, um den Fahrer dabei zu unterstützen, seine Konzentration auf die Aufgabe des Fahrens aufrechtzuerhalten. Zusätzlich zum Analysieren von Schalldaten aus einem jeweiligen Frequenzbereich werden Hintergrundgeräusche aus den aufgenommenen Schalldaten entfernt. Falls die analysierten Schalldaten einen vorbestimmten Schwellenwertüberschreiten, wird eine Markierung gesetzt, und eine Einheit zur Empfindlichkeitsentscheidungsanpassung nutzt das Benutzerprofil, um Fahrzeug-Empfindlichkeitseinstellungen für den Fahrer zu personalisieren. Infolgedessen kann der Zeitpunkt, zu dem dem Fahrer eine Warnnachricht bereitgestellt wird, modifiziert werden, und die Konnektivität bestimmter Geräte wie z. B. von Telefonen und anderen Kommunikationsgeräten kann verzögert werden. Verschiedene Geräte wie z. B. ein HMI-, Gesichtserkennungs- oder Schlüsselanhängergerät, die ein Signal an das Fahrzeug kommunizieren, können verwendet werden, um den Fahrer des Fahrzeugs zu identifizieren, sodass das dem Fahrer zugeordnete Benutzerprofil für das Fahrereignis aktiviert wird.
  • Eine Ausführungsform sieht ein dynamisches Gesprächsfrühwarnsystem vor, das zumindest ein Mikrofon beinhaltet, das Schalldaten in einer Innenfahrgastzelle eines Fahrzeugs aufnimmt. Ein Innenraum-Gesprächsschwellenwertanalysator (ICTA) analysiert Schalldaten innerhalb eines vorbestimmten Frequenzbereichs. Der ICTA stellt fest, ob die Schalldaten innerhalb des vorbestimmten Frequenzbereichs einen Schwellenwertüberschreiten. Eine Einheit zur Empfindlichkeitsentscheidungsanpassung (Sensitivity Decision Targeting, SDT) konfiguriert Fahrzeugeinstellungen neu, die einem Benutzerprofil zugeordnet sind, wenn die Schalldaten den Schwellenwertüberschreiten. Die jeweils neu konfigurierte Fahrzeugeinstellung wird genutzt, um als Reaktion auf eine Betätigung des Fahrzeugsystems einen Fahreralarmierungsvorgang eines Fahrzeugsystems zu aktivieren.
  • Eine Ausführungsform sieht ein System vor, das ein Mikrofon beinhaltet, das Schalldaten in einer Fahrzeug-Fahrgastzelle aufnimmt. Ein Schwellenwertanalysator analysiert Schalldaten innerhalb eines vorbestimmten Frequenzbereichs, um festzustellen, ob die Schalldaten eine Schwellenwert überschreiten. Eine Einheit zur Empfindlichkeitsentscheidungsanpassung konfiguriert Fahrzeugeinstellungen neu, die einem Benutzerprofil zugeordnet sind, wenn die Schalldaten den Schwellenwert überschreiten. Die jeweils neu konfigurierte Fahrzeugeinstellung aktiviert als Reaktion auf eine Betätigung des Fahrzeugsystems einen Fahreralarmierungsvorgang eines Fahrzeugsystems.
  • Figurenliste
    • 1 ist ein Blockdiagramm für ein adaptives Insassengespräch-Frühwarnsystem.
    • 2 veranschaulicht einen beispielhaften Graphen eines zeitdiskreten Mikrofon-Spannungsausgangssignals.
    • 3 veranschaulicht einen beispielhaften Graphen eines Schallenergieverteilungsgraphen.
    • 4 veranschaulicht ein Flussdiagramm für ein Verfahren des Betriebsablaufs des Gesprächsfrühwarnsystems.
  • DETAILLIERTE BESCHREIBUNG
  • In 1 ist ein Blockdiagram für ein adaptives Insassengespräch-Frühwarnsystem 10 dargestellt. Das adaptive Insassengespräch-Frühwarnsystem 10 beinhaltet zumindest ein Innenmikrofon 12, ein Innenraum-Gesprächsschwellenwertanalysator(ICTA)-System 14, ein System 16 zur Empfindlichkeitsentscheidungsanpassung (SDT) 16 und ein Datenspeichersystem 18, die adaptiv verwendet werden, um die Fahrzeug-Fahrerassistenzsysteme 20 zu modifizieren, um den Fahrer dabei zu unterstützen, die Konzentration auf die befahrene Straße aufrechtzuerhalten.
  • Das Innenmikrofon 12 ist innerhalb einer Innenfahrgastzelle eines Fahrzeugs angeordnet, um Gesprächsschallsignale darin aufzunehmen. Das Innenmikrofon 12 nimmt Schalldaten innerhalb der Innenfahrgastzelle auf, und die Schalldaten werden an den ICTA 14 geleitet. Alternativ dazu kann das Datenspeichersystem 18 eine fahrzeuginterne Speichervorrichtung oder ein drahtlos mit dem Fahrzeug verbundenes Remote-Cloud-System beinhalten.
  • Der ICTA 14 beinhaltet einen Prozessor, der bestimmt, ob ein Fahrer und andere Insassen an laut geführten Gesprächen teilnehmen. Der ICTA 14 berechnet Gesprächsschallenergiepegel, die spezifische, charakteristische Geräuschpegel innerhalb der Innenfahrgastzelle eines Fahrzeugs sind, auf Basis der aufgenommenen Schalldaten und stellt fest, ob die Schallpegel einen jeweiligen Schwellenwert überschreiten, sodass Bedingungen markiert werden, um Fahrzeug-Fahrerassistenzsysteme 20 adaptiv zu modifizieren, um den Fahrer dabei zu unterstützen, die Konzentration auf die befahrene Straße aufrechtzuerhalten. Der ICTA 14 bezieht die aufgenommenen Schallsignale vom Innenmikrofon 12 und konzentriert seine Analyse auf ein jeweiliges Frequenzband, das diejenigen Schallcharakteristika innerhalb eines jeweiligen Frequenzbereichs beinhaltet, die den entsprechenden Gesprächen von Fahrern und anderen Insassen im Fahrzeug zugeordnet sind. Der ICTA 14 beinhaltet ferner einen Breitbandfilter, um Hintergrundgeräusche herauszufiltern, um die Hintergrund-Schallsignale von den Gesprächsschallsignalen der Fahrzeuginsassen zu isolieren. Herausgefilterte Hintergrundgeräusche können Innenraum-Umgebungsgeräusche, bei denen es sich nicht um Insassenstimmen handelt, wie z. B. vom Fahrzeug erzeugte Schallsignale, Umweltschallsignale außerhalb des Fahrzeugs und Multimediaschallsignale beinhalten, sind aber nicht auf diese beschränkt.
  • Das adaptive Insassengespräch-Frühwarnsystem 10 kann ferner ein Fahreridentifikationsgerät 22 beinhalten, um den Fahrer zu identifizieren, sodass auf ein ihm zugeordnetes Benutzerprofil zugegriffen werden kann, das in einem Speicher gespeichert ist, sodass es vom ICTA 14 und von der SDT 16 verwendet werden kann. Das Fahrerschnittstellenidentifikationsgerät 22 kann eine Mensch-Maschine-Schnittstelle (HMI), einen Schlüsselanhänger, ein Insassen- oder Gesichtserkennungsgerät oder ein biometrisches Sensorerkennungsgerät beinhalten. Darüber hinaus kann/können eines oder mehrere der beschriebenen Fahreridentifikationsgeräte gemeinsam verwendet werden, um den Fahrer zu identifizieren.
  • 2 veranschaulicht einen beispielhaften Graphen eines zeitdiskreten Spannungsausgangssignals vom Innenmikrofon 12. Die y-Achse gibt die Spannung an, und die x-Achse gibt die Anzahl der Abtastwerte in einem Zeitraum an. Der ICTA 14 bestimmt auf Basis des Zeit-Spannungs-Graphen aus 2 eine Energieverteilung, die in 3 gezeigt ist. Die y-Achse gibt die spektrale Leistungsdichte (Power Spectral Density, PSD) an, und die y-Achse gibt die Frequenz an. Basierend auf dem PSD-Graphen kumuliert der ICTA 14 das Ausgangssignal auf relevanten Frequenzen über einen Zeitraum, um festzustellen, ob der Fahrer und die Insassen an lauten, lebhaften Gesprächen teilnehmen, was zu einem Mangel an Konzentration des Fahrers auf die Aufgabe des Fahrens führen kann.
  • Der ICTA 14 setzt eine ICTA-Markierung, die durch den folgenden Ausdruck gegeben ist: I C T A M a r k i e r u n g ( k ) = { 1  w e n n   I C T A ( k ) > I C T A T 0   s o n s t }
    Figure DE102018107326A1_0001
    wobei ICTA(k) die kumulierte Energie zu einem Zeitpunkt ist, ICTAT einen ICTA-Schwellenwert angibt.
  • Die Markierung wird an das SDT-System 16 kommuniziert, falls die Energie größer als ein vorbestimmter Schwellenwert ist. Die SDT 16 ist ein Subsystem, das individualisierte Fahrzeugsystemeinstellungen für den Fahrer und insbesondere für Fahranfänger oder ältere Fahrer bereitstellt. Die SDT 16 wendet Entscheidungsregeln an, um die Aktivierung einer relevanten Alarmerinnerung und/oder Subsystemmodifikation zu bestimmen. Erinnerungen können visuelle Alarmsignale, akustische Alarmsignale oder haptische Alarmsignale beinhalten. Subsystemmodifikationen können das Verzögern der Konnektivitätskommunikation mit dem Fahrer, das Bereitstellen früherer Kollisions- (z. B. über ein Kollisionswarnsystem) und Spurwechsel-Warnzeiten (z. B. über ein Spurwechsel-Warnsystem) beinhalten, sind aber nicht auf diese beschränkt. Die SDT 16 personalisiert Fahrzeug-Empfindlichkeitseinstellungen für den Fahrer auf Basis eines vorbestimmten Profils. Das bedeutet, dass für jeden ausgewählten Fahrer, insbesondere Fahranfänger wie z. B. solche mit minimaler Fahrerfahrung, ein Benutzerprofil in der SDT 16 eingestellt werden kann. Das Benutzerprofil kann von einer verantwortlichen Person (z. B. einem Elternteil) eingestellt werden, die individuelle Einstellungen anpasst, um eine Warnung zu modifizieren, die mit einem Fahreralarmierungsvorgang und anderen Empfindlichkeitseinstellungen eines Fahrzeugsubsystems in Verbindung steht, wenn das System detektiert, dass Gesprächsgeräusche in der Innenfahrgastzelle einen jeweiligen Schwellenwert überschritten haben, was ein Anzeichen dafür ist, dass der Fahrer nicht seine ganze Aufmerksamkeit auf die Fahraufgabe legt. Wenn der ICTA 14 eine Bedingung markiert hat, der zufolge der Kommunikationsgeräuschschwellenwert überschritten ist, sucht die SDT 16 das Profil für den Fahrer und bestimmt, welche Fahrzeugsubsystemeinstellungen eine Modifikation benötigen, um im Vergleich zu einer Werkseinstellung entweder eine Warnung früher auszulösen oder eine Subsystembetätigung zu verzögern. Falls zum Beispiel eine frontseitige Kollisionswarnung eine Betätigung erfordert, kann die SDT 16 das entsprechende Subsystem anweisen, die Warnzeit zu erhöhen, indem es eine frühere Benachrichtigung an eine Fahrer-Kollisions- und Spurwechselwarnung bereitstellt, als üblicherweise konfiguriert ist. Die verantwortliche Person, die das Benutzerprofil konfiguriert, kann wollen, dass eine Warnung - abhängig vom Abstand zwischen dem Fahrzeug und einem erfassten Objekt oder auf Basis der Zeit bis zur Kollision - früher ausgelöst wird, um dem Fahrer mehr Zeit zum Reagieren zu geben. Andere Konfigurationen können das Verzögern der Eingangskonnektivität beinhalten, was das Verzögern der Konnektivität eingehender Telefonanrufe/Nachrichten oder das Verringern der Lautstärke des Multimediageräts, das derzeit Audiosignale ausgibt, beinhaltet, aber nicht darauf beschränkt ist.
  • Die SDT 16 wendet die Entscheidungsregeln an, um die Aktivierung der relevanten Alarmerinnerung zu bestimmen. Ein Beispiel für eine allgemeine Regel kann die folgende Form annehmen: W e n n ( I C T A M a r k i e r u n g = x i u n d   F a h r e r t y p = z i )
    Figure DE102018107326A1_0002
    • dann SDT_Wert = mi wobei
    • ICTA_Markierung: 1- Innenraumgespräche oft größer als einstellbarer Schwellenwert;
    • 0-Minimale Gespräche
    • Fahrertyp: 1- Fahranfänger, älterer Fahrer; 0-Durchschnitt
    • SDT_Wert: mi = (1, 2 oder 0). wobei
    • 1: Eingangskonnektivitätsinformationen verzögern;
    • 2: Frühere Alarme für Assistenzsysteme; und
    • 0: keine Aktion.
  • 4 veranschaulicht ein Flussdiagramm für ein Verfahren des Betriebsablaufs des Gesprächsfrühwarnsystems. Bei Block 30 wird die Technik zur Überwachung von Bedingungen in der Innenfahrgastzelle des Fahrzeugs aktiviert.
  • Bei Block 31 wird der Fahrer entweder dadurch identifiziert, dass der Fahrer seine Identifikationsinformationen eingibt, oder dadurch, dass ein Fahrzeugsystem den Fahrer mittels verschiedener Techniken identifiziert, welche die Insassendetektion, RFID-Tags, biometrische Sensorerkennung, Gesichtserkennung, MyKey-Schlüssel oder Schlüsselanhänger umfassen, aber nicht auf diese beschränkt sind.
  • Bei Block 32 werden Fahrzeuginnenraum-Schallinformationen, Konnektivitätsdaten, Fahrzeug- und Fahrerinformationen entweder von einem Fahrzeugspeicher oder von einem anderen Speicher wie z. B. einer Cloud bezogen.
  • Bei Block 33 nimmt/nehmen ein oder mehrere Innenmikrofone Schalldaten in der Innenfahrgastzelle des Fahrzeugs auf.
  • Bei Block 34 analysiert der ICTA die aufgenommenen Schalldaten im jeweiligen Frequenzbereich, der mit Insassenstimmen in der Innenfahrgastzelle in Verbindung steht, und filtert auch Hintergrundgeräusche aus den Schalldaten. Der ICTA berechnet Gesprächsschallenergiepegel und bestimmt diesen zugeordnete Entscheidungsfindungsmarkierungen (ICTA_Wert) für die SDT.
  • Bei Block 35 wird eine Bestimmung durchgeführt, ob der ICTA_Wert größer als ein Schwellenwert ist. Falls bestimmt wird, dass der ICTA_Wert nicht größer als der Schwellenwert ist, kehrt die Routine zu Block 33 zurück, um Schalldaten in der Innenfahrgastzelle zu überwachen. Falls bestimmt wird, dass der ICTA_Wert größer als der Schwellenwert ist, fährt die Routine bei Block 36 fort.
  • Bei Block 36 wendet die SDT Entscheidungsregeln an, die für den identifizierten Fahrer personalisiert sind, und bestimmt Aktivierungseinstellungen, die dem Profil des Fahrers zugeordnet sind. Jeweilige, dem Fahrer zugeordnete Aktivierungseinstellungen werden ausgehend von ihren üblichen Einstellungen auf Basis des Profils des Fahrers dynamisch modifiziert.
  • Bei Block 37 werden Fahrzeugsysteme und Konnektivitätseinstellungen in Echtzeit angepasst und dementsprechend betätigt, falls ein jeweiliges Fahrzeugsystem oder eine Konnektivität betätigt wird und der Fahreralarmierungsvorgang eine Betätigung für das jeweilige Fahrzeugsystem benötigt.
  • Obwohl bestimmte Ausführungsformen der vorliegenden Erfindung genau beschrieben wurden, werden Fachleute, an welche sich diese Erfindung richtet, verschiedene alternative Auslegungen und Ausführungsformen erkennen, um die Erfindung zu praktizieren, die von den folgenden Patentansprüchen definiert wird.

Claims (15)

  1. Dynamisches Gesprächsfrühwarnsystem, umfassend: zumindest ein Mikrofon, das Schalldaten in einer Innenfahrgastzelle eines Fahrzeugs aufnimmt; einen Innenraum-Gesprächsschwellenwertanalysator (ICTA), der Schalldaten innerhalb eines vorbestimmten Frequenzbereichs analysiert, wobei der ICTA bestimmt, ob die Schalldaten innerhalb des vorbestimmten Frequenzbereichs einen Schwellenwert überschreiten; ein System zur Empfindlichkeitsentscheidungsanpassung (SDT), das Fahrzeugeinstellungen, die einem Benutzerprofil zugeordnet sind, neu konfiguriert, wenn die Schalldaten den Schwellenwert überschreiten, wobei die jeweilige, neu konfigurierte Fahrzeugeinstellung genutzt wird, um als Reaktion auf eine Betätigung des Fahrzeugsystems einen Fahreralarmierungsvorgang eines Fahrzeugsystems zu aktivieren.
  2. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 1, wobei der vom ICTA analysierte, vorbestimmte Frequenzbereich mit Gesprächsschallsignalen in Verbindung steht, die von Insassen in der Innenfahrgastzelle des Fahrzeugs geäußert werden.
  3. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 2, wobei der ICTA einen Breitbandfilter beinhaltet, um Hintergrundgeräusche aus den Schalldaten zu filtern.
  4. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 3, wobei die Hintergrundgeräusche Multimedia-Schalldaten beinhalten.
  5. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 3, wobei die Hintergrundgeräusche Umwelt-Schalldaten beinhalten.
  6. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 1, wobei das Benutzerprofil konfigurierbare Entscheidungsregeln zum Modifizieren der Fahrzeugeinstellungen beinhaltet.
  7. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 6, wobei jedes Benutzerprofil einem jeweiligen Benutzer zugeordnet ist, wobei jedes Benutzerprofil einen Satz benutzerangepasster Entscheidungsregeln beinhaltet, die für einen jeweiligen Benutzer personalisiert sind.
  8. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 6, wobei die SDT-Einheit auf das Benutzerprofil eines identifizierten Fahrers zugreift und die Entscheidungsregeln innerhalb des Benutzerprofils anwendet, um die Fahrzeugeinstellungen adaptiv zu modifizieren.
  9. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 6, wobei das Fahrzeugsystem ein Kollisionswarnsystem beinhaltet und wobei die Entscheidungsregeln innerhalb des Benutzerprofils zum adaptiven Modifizieren der Fahrzeugeinstellungen das im Vergleich zu einer Werkseinstellung frühere Betätigen einer Kollisionswarnung beinhaltet.
  10. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 6, wobei das Fahrzeugsystem ein Spurwechsel-Warnsystem beinhaltet und wobei die Entscheidungsregeln innerhalb des Benutzerprofils zum adaptiven Modifizieren der Fahrzeugeinstellungen das im Vergleich zu einer Werkseinstellung frühere Betätigen einer Spurwechselwarnung beinhaltet.
  11. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 6, wobei das Fahrzeugsystem eine Konnektivitätseinstellung beinhaltet und wobei die Entscheidungsregeln innerhalb des Benutzerprofils zum adaptiven Modifizieren der Konnektivitätseinstellung das Verzögern der Konnektivität eingehender Telefonanrufe beinhaltet.
  12. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 6, wobei das Fahrzeugsystem eine Konnektivitätseinstellung beinhaltet und wobei die Entscheidungsregeln innerhalb des Benutzerprofils zum adaptiven Modifizieren der Konnektivitätseinstellung das Verzögern der Konnektivität eingehender Nachrichten beinhaltet.
  13. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 6, wobei das Fahrzeugsystem eine Konnektivitätseinstellung beinhaltet und wobei die Entscheidungsregeln innerhalb des Benutzerprofils zum adaptiven Modifizieren der Einstellung das Verringern einer Lautstärkeeinstellung eines Fahrzeug-Multimediageräts beinhaltet.
  14. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 1, das ferner ein Fahreridentifikationsgerät beinhaltet, um einen Fahrer des Fahrzeugs zu identifizieren.
  15. Dynamisches Gesprächsfrühwarnsystem nach Anspruch 14, wobei das Fahreridentifikationsgerät ein Schlüsselanhängergerät beinhaltet, wobei das Schlüsselanhängergerät ein Signal an das Fahrzeug sendet, das den Benutzer identifiziert.
DE102018107326.7A 2017-03-30 2018-03-27 Adaptives Insassengespräch-Frühwarnsystem Pending DE102018107326A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/473,976 US10155523B2 (en) 2017-03-30 2017-03-30 Adaptive occupancy conversational awareness system
US15/473,976 2017-03-30

Publications (1)

Publication Number Publication Date
DE102018107326A1 true DE102018107326A1 (de) 2018-10-04

Family

ID=62068045

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018107326.7A Pending DE102018107326A1 (de) 2017-03-30 2018-03-27 Adaptives Insassengespräch-Frühwarnsystem

Country Status (5)

Country Link
US (1) US10155523B2 (de)
CN (1) CN108696794B (de)
DE (1) DE102018107326A1 (de)
GB (1) GB2563123B (de)
RU (1) RU2704663C2 (de)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111791893B (zh) * 2019-04-03 2021-11-16 北京车和家信息技术有限公司 疲劳处理方法、装置、车辆及计算机可读存储介质
US11562762B2 (en) * 2019-11-12 2023-01-24 BlueOwl, LLC Systems and methods of assessing driver safety based on vehicle noise levels
CN111002904B (zh) * 2019-12-20 2022-04-22 铁将军汽车电子股份有限公司 前方碰撞预警系统及其配置方法和装置
IT202000004570A1 (it) * 2020-03-04 2021-09-04 Federica Cena Sistema elettronico autoveicolistico progettato per far si' che le emissioni sonore all'interno degli abitacoli degli autoveicoli non superino limiti sonori massimi di accettabilita'
CN112339684B (zh) * 2020-10-27 2021-12-24 广州汽车集团股份有限公司 一种基于概率分布的汽车安全机制触发方法及装置
GB2601343B (en) * 2020-11-27 2024-04-10 Continental Automotive Tech Gmbh An adaptive warning system and method thereof

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3686465B2 (ja) * 1995-11-06 2005-08-24 本田技研工業株式会社 車両用運転状況監視装置
JP2008204056A (ja) * 2007-02-19 2008-09-04 Tokai Rika Co Ltd 運転支援装置
US8280580B2 (en) 2008-02-06 2012-10-02 Ford Global Technologies, Llc System and method for controlling electronic stability control based on driver status
US8706349B2 (en) * 2009-12-07 2014-04-22 At&T Mobility Ii Llc Devices, systems and methods for controlling permitted settings on a vehicle
GB2504586B (en) 2010-07-29 2015-01-07 Ford Global Tech Llc Systems and methods for scheduling driver interface tasks based on driver workload
US9493130B2 (en) * 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
US9229905B1 (en) * 2011-04-22 2016-01-05 Angel A. Penilla Methods and systems for defining vehicle user profiles and managing user profiles via cloud systems and applying learned settings to user profiles
US20130038437A1 (en) 2011-08-08 2013-02-14 Panasonic Corporation System for task and notification handling in a connected car
US9135420B2 (en) * 2013-02-06 2015-09-15 GM Global Technology Operations LLC Biometric data-driven application of vehicle operation settings
US9751534B2 (en) * 2013-03-15 2017-09-05 Honda Motor Co., Ltd. System and method for responding to driver state
US9275208B2 (en) * 2013-03-18 2016-03-01 Ford Global Technologies, Llc System for vehicular biometric access and personalization
DE102013222645A1 (de) 2013-11-07 2015-05-07 Robert Bosch Gmbh Erkennungssystem in einem Fahrzeug zur Erfassung der Sprachaktivität eines Fahrzeuginsassen
DE102016107321A1 (de) * 2015-04-22 2016-10-27 Ford Global Technologies, Llc Systeme und Verfahren zum Einteilen von Fahrerschnittstellentasks auf der Basis der Fahrerarbeitslast
JP6075577B2 (ja) 2015-04-24 2017-02-08 マツダ株式会社 運転支援装置
US9758095B2 (en) * 2016-01-25 2017-09-12 International Business Machines Corporation Smartwatch blackbox
CN105667475A (zh) * 2016-03-18 2016-06-15 戴姆勒股份公司 车辆自动制动系统
CN105933819A (zh) * 2016-04-25 2016-09-07 乐视控股(北京)有限公司 调节汽车音响音量的方法及装置
US9956963B2 (en) * 2016-06-08 2018-05-01 GM Global Technology Operations LLC Apparatus for assessing, predicting, and responding to driver fatigue and drowsiness levels

Also Published As

Publication number Publication date
US20180281806A1 (en) 2018-10-04
RU2018111203A3 (de) 2019-10-01
RU2704663C2 (ru) 2019-10-30
CN108696794A (zh) 2018-10-23
RU2018111203A (ru) 2019-10-01
CN108696794B (zh) 2022-03-15
GB201805018D0 (en) 2018-05-09
GB2563123B (en) 2022-02-16
US10155523B2 (en) 2018-12-18
GB2563123A (en) 2018-12-05

Similar Documents

Publication Publication Date Title
DE102018107326A1 (de) Adaptives Insassengespräch-Frühwarnsystem
DE112016004391T5 (de) Dialogvorrichtung und Dialogverfahren
DE102019200954A1 (de) Signalverarbeitungseinrichtung, System und Verfahren zur Verarbeitung von Audiosignalen
DE102010040818A1 (de) Akustische Umgebung eines gefühlsansprechenden Beratungssystems
EP3661797B1 (de) Verfahren, vorrichtung, mobiles anwendergerät, computerprogramm zur steuerung eines audiosystems eines fahrzeugs
EP3430615B1 (de) Fortbewegungsmittel, system und verfahren zur anpassung einer länge einer erlaubten sprechpause im rahmen einer spracheingabe
DE102019200956A1 (de) Signalverarbeitungseinrichtung, System und Verfahren zur Verarbeitung von Audiosignalen
DE102016221646A1 (de) Verbesserte Geräuscherzeugung für leise Fahrzeuge
DE102014225859A1 (de) Gerät und Verfahren für das Erkennen eines Signalhorns, indem ein Klangprozessor benutzt wird
DE202013006009U1 (de) Fahrerassistenzsystem
DE102017209585A1 (de) System und verfahren zur selektiven verstärkung eines akustischen signals
DE102017213249A1 (de) Verfahren und System zum Erzeugen einer auditiven Meldung in einem Innenraum eines Fahrzeugs
DE102022106036A1 (de) Kontextabhängige signalaufbereitung für den sprachassistenten im fahrzeug
DE112017008305T5 (de) Spracherkennungsvorrichtung, Spracherkennungssystem und Spracherkennungsverfahren
DE102014207437A1 (de) Spracherkennung mit einer Mehrzahl an Mikrofonen
DE112018001454T5 (de) Vorrichtung und verfahren zur verbesserung der privatsphäre
DE102017213252A1 (de) Verfahren, Vorrichtung und Computerprogramm zum Variieren eines in einem Fahrzeug auszugebenden Audio-Inhalts
DE112017004568T5 (de) Vorrichtung und verfahren zur verbesserung der privatsphäre
DE112019007580B4 (de) Schallfeld-Steuerungsvorrichtung und Schallfeld-Steuerungsverfahren
DE102015013166A1 (de) Verfahren zum Betrieb eines Fahrzeuges
DE102019003624A1 (de) Verfahren zum Übermitteln eines akustischen Signals an eine Person
DE102019218058B4 (de) Vorrichtung und Verfahren zum Erkennen von Rückwärtsfahrmanövern
DE102006041453A1 (de) Verfahren zur Spracherkennung
DE102016003401A1 (de) Erfassungsvorrichtung und Verfahren zum Erfassen einer Sprachäußerung einer sprechenden Person in einem Kraftfahrzeug
DE102013013869B4 (de) Verfahren zum Betrieb eines Fahrerassistenzsystems zur Warnung vor zu großer Ablenkung und Kraftfahrzeug

Legal Events

Date Code Title Description
R082 Change of representative

Representative=s name: BONSMANN - BONSMANN - FRANK PATENTANWAELTE, DE