DE102023109090B3 - Motor vehicle and method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle - Google Patents
Motor vehicle and method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle Download PDFInfo
- Publication number
- DE102023109090B3 DE102023109090B3 DE102023109090.9A DE102023109090A DE102023109090B3 DE 102023109090 B3 DE102023109090 B3 DE 102023109090B3 DE 102023109090 A DE102023109090 A DE 102023109090A DE 102023109090 B3 DE102023109090 B3 DE 102023109090B3
- Authority
- DE
- Germany
- Prior art keywords
- direction indicator
- activation
- hand movement
- motor vehicle
- artificial intelligence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000004913 activation Effects 0.000 title claims abstract description 85
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 49
- 238000001514 detection method Methods 0.000 claims abstract description 29
- 230000003287 optical effect Effects 0.000 claims abstract description 24
- 230000009471 action Effects 0.000 claims description 6
- 238000001994 activation Methods 0.000 description 60
- 238000011161 development Methods 0.000 description 14
- 230000018109 developmental process Effects 0.000 description 14
- 230000000875 corresponding effect Effects 0.000 description 8
- 210000004247 hand Anatomy 0.000 description 8
- 230000001960 triggered effect Effects 0.000 description 8
- 230000008901 benefit Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 7
- 210000003811 finger Anatomy 0.000 description 7
- 230000004069 differentiation Effects 0.000 description 5
- 230000037007 arousal Effects 0.000 description 4
- 230000003213 activating effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007794 irritation Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
- B60Q1/26—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
- B60Q1/34—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating change of drive direction
- B60Q1/343—Manually actuated switching arrangements therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/10—Interpretation of driver requests or demands
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification
- G10L17/26—Recognition of special voice characteristics, e.g. for use in lie detectors; Recognition of animal voices
Abstract
Die Erfindung betrifft ein Kraftfahrzeug und ein Verfahren zum Unterscheiden einer beabsichtigten von einer unbeabsichtigten Aktivierung eines Fahrtrichtungsanzeigers eines Kraftfahrzeugs (10). Das Verfahren umfasst ein Erfassen (S10) einer Handbewegung eines Fahrers (16) des Kraftfahrzeugs (10) durch eine optische Erfassungseinrichtung (14) des Kraftfahrzeugs (10); falls eine Aktivierung des Fahrtrichtungsanzeigers festgestellt wird, ein Bestimmen (S12) durch eine künstliche Intelligenz, ob die erfasste Handbewegung, die zur Aktivierung des Fahrtrichtungsanzeigers geführt hat, einem vorbestimmten Handbewegungsmuster entspricht, wobei die künstliche Intelligenz zur Bestimmung des Handbewegungsmusters mittels Handbewegungen von beabsichtigten Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers angelernt wurde; und ein Feststellen (S14) einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers, falls die Bestimmung durch die künstliche Intelligenz ergibt, dass die erfasste Handbewegung dem Handbewegungsmuster entspricht.The invention relates to a motor vehicle and a method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle (10). The method comprises detecting (S10) a hand movement of a driver (16) of the motor vehicle (10) by an optical detection device (14) of the motor vehicle (10); if an activation of the direction indicator is detected, determining (S12) by an artificial intelligence whether the detected hand movement that led to the activation of the direction indicator corresponds to a predetermined hand movement pattern, the artificial intelligence being used to determine the hand movement pattern by means of hand movements of intended hand movements Activation of the direction indicator has been learned; and determining (S14) an intended activation of the direction indicator if the determination by the artificial intelligence shows that the detected hand movement corresponds to the hand movement pattern.
Description
Die Erfindung betrifft ein Verfahren zum Unterscheiden einer beabsichtigten von einer unbeabsichtigten Aktivierung eines Fahrtrichtungsanzeigers eines Kraftfahrzeugs. Die Erfindung betrifft weiterhin ein Kraftfahrzeug, das dazu ausgebildet ist, das Verfahren durchzuführen.The invention relates to a method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle. The invention further relates to a motor vehicle that is designed to carry out the method.
Bei einer Fahrt mit einem Kraftfahrzeug kann durch ungewolltes Berühren eines Lenkstockhebels beziehungsweise Blinkerhebels eine Fahrtrichtungsanzeige ausgelöst werden, was zu ungewünschten Irritationen im Straßenverkehr führen kann. Insbesondere bei automatisierten Fahrzeugen wird gefordert, dass eine Fehlbedienung einer Fahrtrichtungsanzeige ausgeschlossen wird.When driving a motor vehicle, a direction indicator can be triggered by unintentionally touching a steering column lever or indicator lever, which can lead to unwanted irritation in traffic. In automated vehicles in particular, it is required that incorrect operation of a direction indicator is prevented.
Aus der
Aus der
Aus der
Die Aufgabe der vorliegenden Erfindung ist es, eine Unterscheidung einer beabsichtigten von einer unbeabsichtigten Aktivierung eines Fahrtrichtungsanzeigers bereitzustellen.The object of the present invention is to provide a distinction between intentional and unintentional activation of a direction indicator.
Die Erfindung basiert auf der Idee, dass eine Handbewegung mittels einer optischen Erfassungseinrichtung überwacht werden kann und daraus Handtrajektorien von beabsichtigten und unbeabsichtigten Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers abgeleitet werden können. Hierzu kann während einer Einlernphase einer künstlichen Intelligenz eine übliche Trajektorie der Hand zumindest für die Aktivierung des Fahrtrichtungsanzeigers eingelernt werden, die in einem Betrieb des Kraftfahrzeugs mit einer aktuellen Handtrajektorie verglichen werden kann, um die Aktivierung des Fahrtrichtungsanzeigers von einer beabsichtigten und einer unbeabsichtigten Bewegung zu unterscheiden.The invention is based on the idea that a hand movement can be monitored using an optical detection device and hand trajectories of intended and unintentional hand movements can be derived from this to activate the direction indicator. For this purpose, during a training phase of an artificial intelligence, a usual trajectory of the hand can be taught at least for the activation of the direction indicator, which can be compared with a current hand trajectory when the motor vehicle is in operation in order to distinguish the activation of the direction indicator from an intended and an unintentional movement .
Ein Aspekt der Erfindung betrifft ein Verfahren zum Unterscheiden einer beabsichtigten von einer unbeabsichtigten Aktivierung eines Fahrtrichtungsanzeigers eines Kraftfahrzeugs. Das Verfahren umfasst als Schritte ein Erfassen einer Handbewegung eines Fahrers des Kraftfahrzeugs durch eine optische Erfassungseinrichtung des Kraftfahrzeugs, wobei falls eine Aktivierung des Fahrtrichtungsanzeigers festgestellt wird, ein Bestimmen durch eine künstliche Intelligenz, ob die erfasste Handbewegung, die zur Aktivierung des Fahrtrichtungsanzeigers geführt hat, einem vorbestimmten Handbewegungsmuster entspricht, wobei die künstliche Intelligenz zur Bestimmung des Handbewegungsmusters mittels Handbewegungen von beabsichtigten Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers angelernt würde, und ein Feststellen einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers, falls die Bestimmung durch die künstliche Intelligenz ergibt, dass die erfasste Handbewegung dem Handbewegungsmuster entspricht.One aspect of the invention relates to a method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle. The method includes the steps of detecting a hand movement of a driver of the motor vehicle by an optical detection device of the motor vehicle, whereby if an activation of the direction indicator is detected, determining by artificial intelligence whether the detected hand movement that led to the activation of the direction indicator is a corresponds to a predetermined hand movement pattern, wherein the artificial intelligence would be trained to determine the hand movement pattern by means of hand movements of intended hand movements to activate the direction indicator, and determining an intended activation of the direction indicator if the determination by the artificial intelligence shows that the detected hand movement corresponds to the hand movement pattern.
Mit anderen Worten kann ein Fahrer des Kraftfahrzeugs, insbesondere Hände beziehungsweise Arme des Fahrers, durch eine optische Erfassungseinrichtung überwacht werden. Beispielsweise kann die optische Erfassungseinrichtung als Kamera und/oder Laserscanner, insbesondere Lidar, ausgebildet sein. Durch die optische Erfassungseinrichtung können Bildaufnahmen der Hände, insbesondere der linken Hand, des Fahrers erfasst werden, wobei aus den Bildaufnahmen eine Handbewegung, das heißt insbesondere eine Trajektorie der Bewegung, ermittelt werden kann.In other words, a driver of the motor vehicle, in particular the driver's hands or arms, can be monitored by an optical detection device. For example, the optical detection device can be designed as a camera and/or laser scanner, in particular lidar. The optical capture device can be used to capture images of the driver's hands, in particular the left hand, whereby a hand movement, that is, in particular a trajectory of the movement, can be determined from the image captures.
Wird die Aktivierung des Fahrtrichtungsanzeigers festgestellt, kann die ermittelte Handbewegung daraufhin überprüft werden, ob die Handbewegung einem vorbestimmten Handbewegungsmuster entspricht beziehungsweise entsprochen hat. Diese Überprüfung kann in Echtzeit durchgeführt werden, oder in einem festgelegten Zeitintervall rückwirkend nach Feststellung der Aktivierung des Fahrtrichtungsanzeigers, wobei Aufnahmedaten der optischen Erfassungseinrichtung, die die Handbewegung umfassen, zwischengespeichert sein können. Mit Aktivieren des Fahrtrichtungsanzeigers ist hierbei das Betätigen des Lenkstockhebels beziehungsweise Blinkerhebels gemeint, wobei vorzugsweise vorgesehen sein kann, dass ein Auslösen des Fahrtrichtungsanzeigers, das heißt beispielsweise die Ausgabe des Lichtsignals, so lange verzögert werden kann, bis festgestellt wurde, ob die Handbewegung beabsichtigt war. Im Fall einer unbeabsichtigten Aktivierung kann das Auslösen des Fahrtrichtungsanzeigers beispielsweise verhindert werden.If the activation of the direction indicator is detected, the determined hand movement can be checked to see whether the hand movement corresponds or has corresponded to a predetermined hand movement pattern. This check can be carried out in real time, or at a set time interval retroactively after the activation of the direction indicator has been detected, with recording data from the optical detection device, which include the hand movement, being buffered. By activating the direction indicator is meant the actuation of the steering column lever or indicator lever, whereby it can preferably be provided that triggering of the direction indicator, that is, for example, the output of the light signal, is delayed for this long until it is determined whether the hand movement was intentional. In the event of unintentional activation, the direction indicator can be prevented from being triggered, for example.
Das Überprüfen, ob die erfasste Handbewegung dem vorbestimmten Handbewegungsmuster entspricht, kann durch eine künstliche Intelligenz durchgeführt werden, die auf einer Recheneinrichtung des Kraftfahrzeugs betrieben werden kann. Die künstliche Intelligenz ist vorzugsweise mittels beabsichtigten Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers angelernt, wobei dies mittels überwachtem und/oder unüberwachtem Lernen durchgeführt werden kann. Vorzugsweise kann vorgesehen sein, dass nur Handbewegungen des aktuellen Fahrers des Kraftfahrzeugs zum Anlernen der künstlichen Intelligenz verwendet werden.Checking whether the detected hand movement corresponds to the predetermined hand movement pattern can be carried out by artificial intelligence, which can be operated on a computing device of the motor vehicle. The artificial intelligence is preferably trained to activate the direction indicator using intended hand movements, whereby this can be carried out using supervised and/or unsupervised learning. Preferably, it can be provided that only hand movements of the current driver of the motor vehicle are used to train the artificial intelligence.
Besonders bevorzugt kann vorgesehen sein, dass zusätzlich zu beabsichtigten Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers auch unbeabsichtigte Handbewegungen zum Anlernen der künstlichen Intelligenz verwendet werden, um ein entsprechendes Handbewegungsmuster dafür bereitzustellen.Particularly preferably, it can be provided that, in addition to intended hand movements to activate the direction indicator, unintentional hand movements are also used to train the artificial intelligence in order to provide a corresponding hand movement pattern for it.
Die künstliche Intelligenz kann dann die erfasste Handbewegung mit dem Handbewegungsmuster vergleichen, und entscheiden, ob es sich dabei um eine beabsichtigte Aktivierung des Fahrtrichtungsanzeigers gehandelt hat. Das heißt, durch die künstliche Intelligenz wird ermittelt, ob die erfasste Handbewegung mit einer Handbewegung aus dem vorbestimmten Handbewegungsmuster übereinstimmt. Ist dies der Fall, kann der Fahrtrichtungsanzeiger in die entsprechende Fahrtrichtung ausgelöst werden, was bedeutet, dass das Blinkersignal erscheint. Stimmt die erfasste Handbewegung nicht mit einer Handbewegung des vorbestimmten Handbewegungsmusters überein oder stimmt diese mit einem Handbewegungsmuster von unbeabsichtigten Handbewegungen überein, kann das Auslösen des Fahrtrichtungsanzeigers verhindert werden.The artificial intelligence can then compare the detected hand movement with the hand movement pattern and decide whether this was an intentional activation of the direction indicator. This means that the artificial intelligence determines whether the detected hand movement corresponds to a hand movement from the predetermined hand movement pattern. If this is the case, the direction indicator can be triggered in the corresponding direction of travel, which means that the turn signal appears. If the detected hand movement does not match a hand movement of the predetermined hand movement pattern or if it matches a hand movement pattern of unintentional hand movements, the direction indicator can be prevented from being triggered.
Im Fall eines autonomen Kraftfahrzeugs kann beispielsweise durch Erkennen einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers eine Fahraktion ausgelöst werden, insbesondere in die entsprechende Richtung. Demgegenüber kann keine Fahraktion ausgelöst werden, falls eine unbeabsichtigte Aktivierung festgestellt wird.In the case of an autonomous motor vehicle, for example, a driving action can be triggered by detecting an intended activation of the direction indicator, in particular in the corresponding direction. In contrast, no driving action can be triggered if unintentional activation is detected.
Durch die Erfindung ergibt sich der Vorteil, dass eine verbesserte Unterscheidung von beabsichtigten und unbeabsichtigten Aktivierungen des Fahrtrichtungsanzeigers bereitgestellt werden kann.The invention has the advantage that an improved distinction between intended and unintentional activations of the direction indicator can be provided.
Die Erfindung umfasst auch Weiterbildungen, durch die sich zusätzliche Vorteile ergeben.The invention also includes further developments that result in additional advantages.
Eine Weiterbildung sieht vor, dass durch die künstliche Intelligenz Handbewegungen des Fahrers des Kraftfahrzeugs zur Aktivierung des Fahrtrichtungsanzeigers angelernt werden. Mit anderen Worten werden nur die Handbewegungen des aktuellen Fahrers zum Anlernen der künstlichen Intelligenz verwendet. Hierbei kann beispielsweise eine Erkennung, vorzugsweise eine Bilderkennung, durch die optische Erfassungseinrichtung stattfinden, welcher Fahrer sich derzeit im Kraftfahrzeug befindet, wodurch die künstliche Intelligenz spezifisch für diesen Fahrer angelernt werden kann und/oder das vorbestimmte Handbewegungsmuster dieses Fahrers abgerufen werden kann. Durch diese Ausführungsform ergibt sich der Vorteil, dass übliche Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers individuell angelernt werden können, was zu einer Verbesserung der Unterscheidung führt.A further development provides for the artificial intelligence to learn the hand movements of the driver of the motor vehicle to activate the direction indicator. In other words, only the current driver's hand movements are used to train the artificial intelligence. Here, for example, a recognition, preferably an image recognition, can take place by the optical detection device as to which driver is currently in the motor vehicle, whereby the artificial intelligence can be trained specifically for this driver and/or the predetermined hand movement pattern of this driver can be retrieved. This embodiment has the advantage that usual hand movements for activating the direction indicator can be learned individually, which leads to an improvement in differentiation.
Eine weitere Weiterbildung sieht vor, dass durch die künstliche Intelligenz zum Erkennen einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers eine Trajektorie der erfassten Handbewegung mit zumindest einer aus dem Handbewegungsmuster angelernten Trajektorie verglichen wird. Das heißt, aus Aufnahmen, die durch die optische Erfassungseinrichtung erfasst wurden, kann die Hand und eine Bewegung der Hand im Raum ermittelt werden. Insbesondere kann ein Weg, das heißt Ortskoordinaten in x-, y- und z-Richtung, und/oder eine Geschwindigkeit bei der Handbewegung ermittelt werden. Diese erfasste Trajektorie kann dann mit angelernten Trajektorien verglichen werden, um zu bestimmen, ob die Aktivierung beabsichtigt war oder nicht. Das heißt, die Handtrajektorie kann sowohl mit Trajektorien von beabsichtigten als auch unbeabsichtigten Handbewegungen verglichen werden. Hierdurch kann eine bevorzugte Ausgestaltung zur Unterscheidung bereitgestellt werden.A further development provides that the artificial intelligence compares a trajectory of the detected hand movement with at least one trajectory learned from the hand movement pattern in order to recognize an intended activation of the direction indicator. This means that the hand and a movement of the hand in space can be determined from images captured by the optical detection device. In particular, a path, i.e. location coordinates in the x, y and z directions, and/or a speed during the hand movement can be determined. This captured trajectory can then be compared to learned trajectories to determine whether the activation was intentional or not. That is, the hand trajectory can be compared to trajectories of both intentional and unintentional hand movements. This makes it possible to provide a preferred embodiment for differentiation.
Eine weitere Weiterbildung sieht vor, dass durch die künstliche Intelligenz zum Erkennen einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers eine Fingerhaltung der erfassten Handbewegung mit einer aus dem Handbewegungsmuster angelernten Fingerhaltung verglichen wird. Das heißt, dass alternativ oder zusätzlich zu einer Trajektorie der Hand auch eine Fingerhaltung bei Aktivierung des Fahrtrichtungsanzeigers erkannt und für die Unterscheidung verwendet werden kann, ob die Aktivierung beabsichtigt war oder nicht. So kann insbesondere die Verwendung von ein bis zwei Fingern, insbesondere Zeige- und/oder Mittelfinger oder ein Umgreifen beziehungsweise ziehen, insbesondere unter Einsatz des Daumens, für eine bewusste Aktivierung des Fahrtrichtungsanzeigers sprechen. Hierdurch ergibt sich der Vorteil, dass eine weitere bevorzugte Ausgestaltung zur Unterscheidung bereitgestellt werden kann.A further development provides that the artificial intelligence compares a finger position of the detected hand movement with a finger position learned from the hand movement pattern in order to recognize an intended activation of the direction indicator. This means that, alternatively or in addition to a trajectory of the hand, a finger position can also be recognized when the direction indicator is activated and used to distinguish whether the activation was intended or not. In particular, the use of one or two fingers, especially the index and/or middle fingers, or gripping or pulling, especially using the thumb, can indicate conscious activation of the direction indicator. This results in the advantage that a further preferred embodiment can be provided for differentiation.
Eine weitere Weiterbildung sieht vor, dass durch die künstliche Intelligenz zum Erkennen einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers geprüft wird, ob als Handbewegungsmuster nach Aktivierung des Fahrtrichtungsanzeigers beide Hände des Fahrers ein Lenkrad des Kraftfahrzeugs ergreifen. Das Ergreifen des Lenkrads kann vorzugsweise auch durch die optische Erfassungseinrichtung erkannt werden. Zusätzlich oder alternativ können auch Berührungssensoren, insbesondere kapazitive Sensoren, im Lenkrad verwendet werden, um ein anschließendes Festhalten am Lenkrad festzustellen. Insbesondere kann ein Ergreifen des Lenkrads nach Aktivierung des Fahrtrichtungsanzeigers für eine hohe Übernahmebereitschaft des Fahrers für eine Lenkbewegung sprechen, wodurch somit eine beabsichtigte Aktivierung festgestellt werden kann. Dies kann beispielsweise unterstützend in dem Verfahren durchgeführt werden, um die beabsichtigte Aktivierung des Fahrtrichtungsanzeigers festzustellen oder, um Lerndaten zum Anlernen der künstlichen Intelligenz bereitzustellen.A further development provides that the artificial intelligence checks, in order to detect an intended activation of the direction indicator, whether both of the driver's hands grip a steering wheel of the motor vehicle as a hand movement pattern after activation of the direction indicator. Gripping the steering wheel can preferably also be detected by the optical detection device. Additionally or alternatively, touch sensors, in particular capacitive sensors, can also be used in the steering wheel to detect subsequent holding on the steering wheel. In particular, gripping the steering wheel after activating the direction indicator can indicate a high willingness of the driver to take over a steering movement, which means that an intended activation can be determined. This can, for example, be carried out to support the method in order to determine the intended activation of the direction indicator or to provide learning data for training the artificial intelligence.
Eine weitere Weiterbildung sieht vor, dass durch die künstliche Intelligenz zum Erkennen einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers geprüft wird, ob als Handbewegungsmuster vor Aktivierung des Fahrtrichtungsanzeigers beide Hände des Fahrers am Lenkrad sind und die linke Hand des Fahrers für eine vorbestimmte Zeit vom Lenkrad entfernt wird und während dieser vorbestimmten Zeit die Aktivierung des Fahrtrichtungsanzeigers festgestellt wird. So kann beispielsweise falls die linke Hand für eine Zeit von 0,5 bis 3 Sekunden vom Lenkrad entfernt wird, und anschließend die Aktivierung des Fahrtrichtungsanzeigers festgestellt wird, auf eine beabsichtigte Aktivierung zurückgeschlossen werden. Vorzugsweise können somit auch Lerndaten zum Anlernen der künstlichen Intelligenz bereitgestellt werden.A further development provides that the artificial intelligence checks whether the driver's hands are on the steering wheel and the driver's left hand is removed from the steering wheel for a predetermined time as a hand movement pattern before the direction indicator is activated During this predetermined time, the activation of the direction indicator is detected. For example, if the left hand is removed from the steering wheel for a time of 0.5 to 3 seconds and the activation of the direction indicator is then detected, it can be concluded that activation was intended. Preferably, learning data for training the artificial intelligence can also be provided.
Eine weitere Weiterbildung sieht vor, dass die beabsichtigte Aktivierung des Fahrtrichtungsanzeigers durch ein Übereinstimmen einer erfassten Blickrichtung des Fahrers mit einer Aktivierung des Fahrtrichtungsanzeigers in die entsprechende Richtung ermittelt wird, wobei die Blickrichtung durch die optische Erfassungseinrichtung in einem vorgegebenen Zeitraum vor der Aktivierung des Fahrtrichtungsanzeigers bestimmt wird. Mit anderen Worten können zusätzlich zur Unterscheidung und/oder zur Bereitstellung von Lerndaten zum Anlernen der künstlichen Intelligenz Daten erhoben werden, bei denen neben einer Handbewegung, die zu einer Aktivierung des Fahrtrichtungsanzeigers geführt hat, auch eine Blickrichtung des Fahrers ausgewertet wird. Die Blickrichtung des Fahrers kann beispielsweise auch durch eine optische Erfassungseinrichtung des Kraftfahrzeugs ermittelt werden. Wird festgestellt, dass die Blickrichtung in einem vorgegebenen Zeitraum von beispielsweise 2 Sekunden vor der Aktivierung des Fahrtrichtungsanzeigers in Richtung der entsprechenden Aktivierung erfolgt, insbesondere in Richtung zu einem Seitenspiegel und/oder in einem Drehwinkel der Augen und/oder des Kopfes in Relation zu einer Fahrzeugmittelachse, kann auf eine gewollte Aktivierung zurückgeschlossen werden. Vorzugsweise kann für die Bereitstellung von Lerndaten auch ein anschließendes Fahren in die Richtung als Indikator verwendet werden, dass die erfasste Aktivierung beabsichtigt war, wobei somit die erfassten Daten als Lerndaten verwendet werden können. Durch diese Weiterbildung ergibt sich der Vorteil, dass eine verbesserte Unterscheidung und/oder verbesserte Lerndaten zur Bestimmung von einer beabsichtigten Aktivierung des Fahrtrichtungsanzeigers bereitgestellt werden können.A further development provides that the intended activation of the direction indicator is determined by matching a detected direction of view of the driver with an activation of the direction indicator in the corresponding direction, the direction of view being determined by the optical detection device in a predetermined period of time before the activation of the direction indicator . In other words, in addition to differentiating and/or providing learning data for training the artificial intelligence, data can be collected in which, in addition to a hand movement that led to activation of the direction indicator, the driver's line of sight is also evaluated. The driver's line of sight can also be determined, for example, by an optical detection device of the motor vehicle. If it is determined that the direction of vision in a predetermined period of time of, for example, 2 seconds before the activation of the direction indicator is in the direction of the corresponding activation, in particular in the direction of a side mirror and / or in a rotation angle of the eyes and / or the head in relation to a vehicle center axis , it can be concluded that the activation was intentional. Preferably, for the provision of learning data, subsequent driving in the direction can also be used as an indicator that the detected activation was intended, whereby the detected data can thus be used as learning data. This further development has the advantage that an improved distinction and/or improved learning data can be provided for determining an intended activation of the direction indicator.
Eine weitere Weiterbildung sieht vor, dass das Kraftfahrzeug ein autonom fahrendes Kraftfahrzeug ist, wobei durch das autonom fahrende Kraftfahrzeug bei Feststellen der beabsichtigten Aktivierung des Fahrtrichtungsanzeigers eine Fahraktion in die entsprechende Richtung des aktivierten Fahrtrichtungsanzeigers durchgeführt wird. Insbesondere kann ein Spurwechsel und/oder ein Abbiegen veranlasst werden.A further development provides that the motor vehicle is an autonomously driving motor vehicle, with the autonomously driving motor vehicle carrying out a driving action in the corresponding direction of the activated direction indicator when the intended activation of the direction indicator is detected. In particular, a lane change and/or a turn can be initiated.
Eine weitere Weiterbildung sieht vor, dass durch eine akustische Erfassungseinrichtung des Kraftfahrzeugs eine Stimmenerkennung im Kraftfahrzeug durchgeführt wird, wobei bei der Stimmenerkennung in Abhängigkeit von einer Tonalität der Stimme und/oder eines Sprachmusters und/oder einer Lautstärke ein Erregungszustand des Fahrers festgestellt wird, wobei eine Unterscheidung einer beabsichtigten von einer unbeabsichtigten Aktivierung des Fahrtrichtungsanzeigers zusätzlich in Abhängigkeit des Erregungszustands durchgeführt wird. Insbesondere kann der Erregungszustand ein Indikator dafür sein, ob ein Fahrer eine Aktivierung beabsichtigt oder unbeabsichtigt durchgeführt hat. Falls beispielsweise festgestellt wird, dass der Fahrer ruhig ist, können Anzeichen vorliegen, dass eine beabsichtigte Aktivierung durchgeführt wird. Bei einem hohen festgestellten Erregungszustand ist dagegen die Wahrscheinlichkeit für eine unbeabsichtigte Aktivierung höher. Die akustische Erfassungseinrichtung kann beispielsweise ein Mikrofon umfassen, wobei eine aufgenommene Stimme mittels der künstlichen Intelligenz oder einer weiteren künstlichen Intelligenz auf die Tonalität und/oder das Sprachmuster und/oder die Lautstärke zur Ermittlung des Erregungszustands analysiert werden kann. Durch diese Weiterbildung ergibt sich der Vorteil, dass eine Unterscheidung weiter verbessert werden kann.A further development provides that a voice recognition is carried out in the motor vehicle by an acoustic detection device of the motor vehicle, wherein during the voice recognition a state of excitement of the driver is determined as a function of a tonality of the voice and/or a speech pattern and/or a volume, wherein a Differentiation of an intentional from an unintentional activation of the direction indicator is also carried out depending on the excitation state. In particular, the state of arousal can be an indicator of whether a driver carried out an activation intentionally or unintentionally. For example, if the driver is determined to be calm, there may be indications that an intentional activation is occurring. On the other hand, when a high level of arousal is detected, the probability of unintentional activation is higher. The acoustic detection device can, for example, comprise a microphone, wherein a recorded voice can be analyzed by means of the artificial intelligence or a further artificial intelligence for the tonality and/or the speech pattern and/or the volume in order to determine the state of arousal. This further development has the advantage that differentiation can be further improved.
Ein weiterer Aspekt der Erfindung betrifft ein Kraftfahrzeug, umfassend eine optische Erfassungseinrichtung und eine Recheneinrichtung, wobei die optische Erfassungseinrichtung dazu ausgebildet ist, eine Handbewegung eines Fahrers des Kraftfahrzeugs zu erfassen, wobei die Recheneinrichtung eine künstliche Intelligenz aufweist, wobei die künstliche Intelligenz dazu ausgebildet ist, zu bestimmen, ob die erfasste Handbewegung, die zu einer Aktivierung des Fahrtrichtungsanzeigers geführt hat, einem vorbestimmten Handbewegungsmuster entspricht, wobei die künstliche Intelligenz zur Bestimmung des Handbewegungsmusters mittels Handbewegungen von beabsichtigten Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers angelernt ist, und eine beabsichtigte Aktivierung des Fahrtrichtungsanzeigers festzustellen, falls die erfasste Handbewegung dem Handbewegungsmuster entspricht. Des Weiteren kann die Recheneinrichtung dazu ausgebildet sein, ein Steuersignal zum Auslösen des Fahrtrichtungsanzeigers zu erzeugen, falls eine beabsichtigte Aktivierung festgestellt ist. Das erfindungsgemäße Kraftfahrzeug ist bevorzugt als Kraftwagen, insbesondere als Personenkraftwagen oder Lastkraftwagen, oder als Personenbus oder Motorrad ausgestaltet. Hierbei ergeben sich gleiche Vorteile und Variationsmöglichkeiten wie bei dem Verfahren. A further aspect of the invention relates to a motor vehicle comprising an optical detection device and a computing device, wherein the optical detection device is designed to detect a hand movement of a driver of the motor vehicle, wherein the computing device has an artificial intelligence, wherein the artificial intelligence is designed to determine whether the detected hand movement leads to an activation of the direction indicator corresponds to a predetermined hand movement pattern, the artificial intelligence being trained to determine the hand movement pattern by means of hand movements of intended hand movements to activate the direction indicator, and to determine an intended activation of the direction indicator if the detected hand movement corresponds to the hand movement pattern. Furthermore, the computing device can be designed to generate a control signal for triggering the direction indicator if intended activation is detected. The motor vehicle according to the invention is preferably designed as a motor vehicle, in particular as a passenger car or truck, or as a passenger bus or motorcycle. This results in the same advantages and possible variations as with the process.
Für Anwendungsfälle oder Anwendungssituationen, die sich bei dem Verfahren ergeben können und die hier nicht explizit beschrieben sind, kann vorgesehen sein, dass gemäß dem Verfahren eine Fehlermeldung und/oder eine Aufforderung zur Eingabe einer Nutzerrückmeldung ausgegeben und/oder eine Standardeinstellung und/oder ein vorbestimmter Initialzustand eingestellt wird.For use cases or application situations that may arise with the method and that are not explicitly described here, it can be provided that an error message and/or a request to enter user feedback and/or a standard setting and/or a predetermined one can be issued according to the method Initial state is set.
Zu der Erfindung gehört auch die Steuervorrichtung für das Kraftfahrzeug. Die Steuervorrichtung kann eine Datenverarbeitungsvorrichtung oder eine Prozessoreinrichtung aufweisen, die dazu eingerichtet ist, eine Ausführungsform des erfindungsgemäßen Verfahrens durchzuführen. Die Prozessoreinrichtung kann hierzu zumindest einen Mikroprozessor und/oder zumindest einen Mikrocontroller und/oder zumindest einen FPGA (Field Programmable Gate Array) und/oder zumindest einen DSP (Digital Signal Processor) aufweisen. Des Weiteren kann die Prozessoreinrichtung Programmcode aufweisen, der dazu eingerichtet ist, bei Ausführen durch die Prozessoreinrichtung die Ausführungsform des erfindungsgemäßen Verfahrens durchzuführen. Der Programmcode kann in einem Datenspeicher der Prozessoreinrichtung gespeichert sein. Die Prozessoreinrichtung kann z.B. auf zumindest einer Schaltungsplatine und/oder auf zumindest einem SoC (System on Chip) basieren.The invention also includes the control device for the motor vehicle. The control device can have a data processing device or a processor device that is set up to carry out an embodiment of the method according to the invention. For this purpose, the processor device can have at least one microprocessor and/or at least one microcontroller and/or at least one FPGA (Field Programmable Gate Array) and/or at least one DSP (Digital Signal Processor). Furthermore, the processor device can have program code that is designed to carry out the embodiment of the method according to the invention when executed by the processor device. The program code can be stored in a data memory of the processor device. The processor device can, for example, be based on at least one circuit board and/or on at least one SoC (System on Chip).
Zu der Erfindung gehören auch Weiterbildungen des erfindungsgemäßen Kraftfahrzeugs, die Merkmale aufweisen, wie sie bereits im Zusammenhang mit den Weiterbildungen des erfindungsgemäßen Verfahrens beschrieben worden sind. Aus diesem Grund sind die entsprechenden Weiterbildungen des erfindungsgemäßen Kraftfahrzeugs hier nicht noch einmal beschrieben.The invention also includes further developments of the motor vehicle according to the invention, which have features as have already been described in connection with the further developments of the method according to the invention. For this reason, the corresponding developments of the motor vehicle according to the invention are not described again here.
Als eine weitere Lösung umfasst die Erfindung auch ein computerlesbares Speichermedium, umfassend Programmcode, der bei der Ausführung durch einen Computer oder einen Computerverbund diesen veranlasst, eine Ausführungsform des erfindungsgemäßen Verfahrens auszuführen. Das Speichermedium kann zumindest teilweise als ein nicht-flüchtiger Datenspeicher (z.B. als eine Flash-Speicher und/oder als SSD - solid state drive) und/oder zumindest teilweise als ein flüchtiger Datenspeicher (z.B. als ein RAM - random access memory) bereitgestellt sein. Das Speichermedium kann in dem Computer oder Computerverbund angeordnet sein. Das Speichermedium kann aber auch beispielsweise als sogenannter Appstore-Server und/oder Cloud-Server im Internet betrieben sein. Durch den Computer oder Computerverbund kann eine Prozessorschaltung mit beispielsweise zumindest einem Mikroprozessor bereitgestellt sein. Der Programmcode kann als Binärcode und/oder als Assembler-Code und/oder als Quellcode einer Programmiersprache (z.B. C) und/oder als Programmskript (z.B. Python) bereitgestellt sein.As a further solution, the invention also includes a computer-readable storage medium comprising program code which, when executed by a computer or a computer network, causes it to carry out an embodiment of the method according to the invention. The storage medium can be provided at least partially as a non-volatile data storage (e.g. as a flash memory and/or as an SSD - solid state drive) and/or at least partially as a volatile data storage (e.g. as a RAM - random access memory). The storage medium can be arranged in the computer or computer network. The storage medium can also be operated on the Internet, for example, as a so-called app store server and/or cloud server. The computer or computer network can provide a processor circuit with, for example, at least one microprocessor. The program code can be provided as binary code and/or as assembler code and/or as source code of a programming language (e.g. C) and/or as a program script (e.g. Python).
Die Erfindung umfasst auch die Kombinationen der Merkmale der beschriebenen Ausführungsformen. Die Erfindung umfasst also auch Realisierungen, die jeweils eine Kombination der Merkmale mehrerer der beschriebenen Ausführungsformen aufweisen, sofern die Ausführungsformen nicht als sich gegenseitig ausschließend beschrieben wurden.The invention also includes the combinations of the features of the described embodiments. The invention therefore also includes implementations that each have a combination of the features of several of the described embodiments, provided that the embodiments have not been described as mutually exclusive.
Im Folgenden sind Ausführungsbeispiele der Erfindung beschrieben. Hierzu zeigt:
-
1 ein schematisch dargestelltes Kraftfahrzeug gemäß einer beispielhaften Ausführungsform; -
2 ein schematisches Verfahrensdiagramm gemäß einer beispielhaften Ausführungsform.
-
1 a schematically illustrated motor vehicle according to an exemplary embodiment; -
2 a schematic process diagram according to an exemplary embodiment.
Bei den im Folgenden erläuterten Ausführungsbeispielen handelt es sich um bevorzugte Ausführungsformen der Erfindung. Bei den Ausführungsbeispielen stellen die beschriebenen Komponenten der Ausführungsformen jeweils einzelne, unabhängig voneinander zu betrachtende Merkmale der Erfindung dar, welche die Erfindung jeweils auch unabhängig voneinander weiterbilden. Daher soll die Offenbarung auch andere als die dargestellten Kombinationen der Merkmale der Ausführungsformen umfassen. Des Weiteren sind die beschriebenen Ausführungsformen auch durch weitere der bereits beschriebenen Merkmale der Erfindung ergänzbar.The exemplary embodiments explained below are preferred embodiments of the invention. In the exemplary embodiments, the described components of the embodiments each represent individual features of the invention that are to be considered independently of one another and which also further develop the invention independently of one another. Therefore, the disclosure is intended to include combinations of the features of the embodiments other than those shown. Furthermore, the descriptions are: NEN embodiments can also be supplemented by further features of the invention already described.
In den Figuren bezeichnen gleiche Bezugszeichen jeweils funktionsgleiche Elemente.In the figures, the same reference numerals designate functionally identical elements.
In
Wird beispielsweise durch die Recheneinrichtung 12 eine Aktivierung eines Fahrtrichtungsanzeigers des Kraftfahrzeugs 10 erkannt, wobei der Fahrtrichtungsanzeiger insbesondere mittels eines Blinkerhebels 20 aktiviert werden kann, können Bilddaten der optischen Erfassungseinrichtung 14 von der künstlichen Intelligenz darauf überprüft werden, ob eine Handbewegung in den erfassten Bilddaten einem vorbestimmten Handbewegungsmuster entspricht, um zu unterscheiden, ob die Betätigung des Blinkerhebels 20 zur Aktivierung des Fahrtrichtungsanzeigers beabsichtigt ist oder nicht. Hierzu kann die künstliche Intelligenz mittels Lerndaten angelernt sein, insbesondere mittels Aufnahmen von Handbewegungen bei denen eine beabsichtigte Aktivierung des Fahrtrichtungsanzeigers vorliegt, um Handbewegungsmuster von beabsichtigten Aktivierungen des Fahrtrichtungsanzeigers zu erhalten. Die Lerndaten können vorzugsweise von dem gleichen Fahrer 16 stammen, der sich derzeit im Kraftfahrzeug 10 befindet.If, for example, an activation of a direction indicator of the
Insbesondere kann eine Trajektorie der erfassten Handbewegung mit einer angelernten Trajektorie verglichen werden und/oder es kann eine Fingerhaltung der erfassten Handbewegung mit einer angelernten Fingerhaltung verglichen werden, die bei einer beabsichtigten Aktivierung vorliegt. Zum Beispiel kann eine Trajektorie der Hand 18, die aus den Bilddaten der optischen Erfassungseinrichtung 14 ermittelt werden kann, daraufhin überprüft werden, ob diese ausgehend von einem Lenkrad 22 des Kraftfahrzeugs 10 zum Blinkerhebel 20 auf einem durch das Handbewegungsmuster vorbestimmten Weg stattfindet, insbesondere mit einer vorbestimmten Geschwindigkeit, um den Fahrtrichtungsanzeiger zu aktivieren.In particular, a trajectory of the detected hand movement can be compared with a trained trajectory and/or a finger posture of the detected hand movement can be compared with a trained finger posture that is present during an intended activation. For example, a trajectory of the
Zusätzlich kann für eine weitere Verbesserung der Unterscheidung zwischen einer beabsichtigten von einer unbeabsichtigten Handbewegung auch überprüft werden, ob vor der Aktivierung des Fahrtrichtungsanzeigers beide Hände am Lenkrad 22 sind und nur die linke Hand 18 für eine vorbestimmte Zeit, von beispielsweise 0,5 bis 3 Sekunden vom Lenkrad 22 entfernt wird und während dieser Zeit die Aktivierung des Fahrtrichtungsanzeigers festgestellt wird, vorzugsweise gefolgt von einem Wiederergreifen des Lenkrads 22. Dies spricht für eine gewollte Handbewegung zum Blinkerhebel 20 mit anschließender Fahrbereitschaft, die mittels des Ergreifens des Lenkrads 22 angezeigt werden kann. Des Weiteren kann die Aktivierung des Fahrtrichtungsanzeigers mit einer Blickrichtung des Fahrers 16 korreliert werden, indem durch die optische Erfassungseinrichtung 14 überprüft wird, ob die Blickrichtung in die entsprechende Richtung des Fahrtrichtungsanzeigers gerichtet ist.In addition, to further improve the distinction between an intended and an unintentional hand movement, it can also be checked whether both hands are on the
Wird durch die künstliche Intelligenz festgestellt, dass die Aktivierung des Fahrtrichtungsanzeigers beabsichtigt ist, kann ein Lichtsignal des Fahrtrichtungsanzeigers ausgelöst werden und/oder eine Fahraktion des autonomen Kraftfahrzeugs kann in die Richtung des aktivierten Fahrtrichtungsanzeigers durchgeführt werden, wobei die Fahraktion beispielsweise durch die Recheneinrichtung 12 gesteuert werden kann.If the artificial intelligence determines that the activation of the direction indicator is intended, a light signal of the direction indicator can be triggered and / or a driving action of the autonomous motor vehicle can be carried out in the direction of the activated direction indicator, the driving action being controlled, for example, by the
Vorzugsweise kann das Kraftfahrzeug 10 auch eine akustische Erfassungseinrichtung 24 aufweisen, beispielsweise ein Mikrofon, wobei hierdurch Aufnahmen einer Stimme des Fahrers 16 und/oder weiterer Fahrzeuginsassen durchgeführt werden können. Die Aufnahmen der Stimme können der Recheneinrichtung 12, insbesondere der künstlichen Intelligenz, bereitgestellt werden, um eine Stimmenerkennung durchzuführen. Mittels der Stimmenerkennung kann in Abhängigkeit von einer Tonalität der Stimme und/oder eines Sprachmusters und/oder einer Lautstärke ein Erregungszustand des Fahrers 16 ermittelt werden, wobei mittels des Erregungszustands zusätzlich eine Unterscheidung von einer beabsichtigten und unbeabsichtigten Aktivierung des Fahrtrichtungsanzeigers durchgeführt werden kann.Preferably, the
In
In einem Schritt S10 wird eine Handbewegung eines Fahrers 16 des Kraftfahrzeugs 10 durch eine optische Erfassungseinrichtung 14 des Kraftfahrzeugs 10 erfasst.In a step S10, a hand movement of a driver 16 of the
Falls eine Aktivierung des Fahrtrichtungsanzeigers festgestellt wird, wird in einem Schritt S12 durch eine künstliche Intelligenz bestimmt, ob die erfasste Handbewegung, die zur Aktivierung des Fahrtrichtungsanzeigers geführt hat, einem vorbestimmten Handbewegungsmuster entspricht, wobei die künstliche Intelligenz zur Bestimmung des Handbewegungsmusters mittels Handbewegungen von beabsichtigten Handbewegungen zur Aktivierung des Fahrtrichtungsanzeigers angelernt wurde.If an activation of the direction indicator is detected, in a step S12 an artificial intelligence determines whether the detected hand movement that led to the activation of the direction indicator corresponds to a predetermined hand movement pattern, the artificial intelligence being used to determine the hand movement pattern by means of hand movements from intended hand movements has been trained to activate the direction indicator.
In einem Schritt S14 kann eine beabsichtigte Aktivierung des Fahrtrichtungsanzeigers festgestellt werden, falls die Bestimmung durch die künstliche Intelligenz ergibt, dass die erfasste Handbewegung dem Handbewegungsmuster entspricht, wobei in diesem Fall durch eine Recheneinrichtung 12 ein Steuersignal erzeugt werden kann, durch das der Fahrtrichtungsanzeiger ausgelöst wird und/oder ein Richtungswechsel des als autonom ausgebildeten Kraftfahrzeugs 10 veranlasst wird.In a step S14, an intended activation of the direction indicator can be determined if the determination by the artificial intelligence shows that the detected hand movement corresponds to the hand movement pattern, in which case a control signal can be generated by a
In einem weiteren beispielhaften Aspekt ist vorgesehen, dass eine Überwachung einer Handbewegung und eine Unterscheidung von Handtrajektorien durchgeführt werden. Hierzu erlernt eine künstliche Intelligenz während einer Einlernphase eine übliche Trajektorie der Hand 18 und vergleicht sie nach der Einlernphase mit der aktuellen Handtrajektorie. So kann bestimmt werden, ob die Handbewegung beabsichtigt oder unbeabsichtigt war.In a further exemplary aspect, it is provided that a hand movement is monitored and hand trajectories are differentiated. For this purpose, an artificial intelligence learns a usual trajectory of the
Beispielsweise kann die Blinkrichtung und ein Blickmuster des Fahrers 16 vor Betätigung des Blinkerhebels 20, insbesondere 2 Sekunden vorher, abgeglichen werden. Hierbei kann der Fahrer 16 den Verkehr in einem Zielfahrstreifen durch einen Seitenspiegel oder einen Schulterblick ausschließen oder abgleichen. Zumindest kann eine Richtung hinsichtlich einer Fahrzeugmittelachse, in die der Fahrer 16 blickt, mit einer Richtung des Fahrtrichtungsanzeigers abgeglichen werden, wobei das Vorliegen eines Blickes in den Seitenspiegel und/oder einer Blickrichtung durch die Windschutzscheibe auf eine sehr hohe Wahrscheinlichkeit einer gewollten Aktivierung des Fahrtrichtungsanzeigers hindeuten kann.For example, the direction of flashing and a gaze pattern of the driver 16 can be compared before the
Auch kann der Ablauf von Handbewegungen nach Betätigung des Fahrtrichtungsanzeigers verwendet werden. Beispielsweise kann der Fahrer 16 vor der Betätigung die Hände nicht am Lenkrad 22 haben und direkt nach der Betätigung beide Hände auf das Lenkrad legen, was eine hohe Übernahmebereitschaft signalisiert und auf eine beabsichtigte Aktivierung hindeutet. Wenn beide Hände am Lenkrad 22 sind und nur die linke Hand 18 für eine bestimmte Zeit von beispielsweise 0,5 bis 3 Sekunden nicht am Lenkrad 22 war und während dieser Zeit der Fahrtrichtungsanzeiger betätigt wurde, kann dies auch auf eine beabsichtigte Aktivierung hindeuten.The sequence of hand movements after operating the direction indicator can also be used. For example, the driver 16 may not have his hands on the
Auch kann aufgrund einer Tonalität von Stimmen, eines Sprachmusters und einer Lautstärke ein Erregungszustand festgestellt werden, was eine Trajektorienwahl beeinflussen kann.A state of arousal can also be determined based on the tonality of voices, a speech pattern and a loudness, which can influence the choice of trajectory.
Insgesamt zeigen die Beispiele, wie eine Unterscheidung einer beabsichtigten und unbeabsichtigten Blinkeraktivierung durchgeführt werden kann.Overall, the examples show how a distinction can be made between intentional and unintentional turn signal activation.
Claims (10)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102023109090.9A DE102023109090B3 (en) | 2023-04-11 | 2023-04-11 | Motor vehicle and method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102023109090.9A DE102023109090B3 (en) | 2023-04-11 | 2023-04-11 | Motor vehicle and method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102023109090B3 true DE102023109090B3 (en) | 2024-01-18 |
Family
ID=89387210
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE102023109090.9A Active DE102023109090B3 (en) | 2023-04-11 | 2023-04-11 | Motor vehicle and method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle |
Country Status (1)
| Country | Link |
|---|---|
| DE (1) | DE102023109090B3 (en) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102007020936A1 (en) | 2007-05-04 | 2008-12-04 | Volkswagen Ag | Functional units e.g. horn, controlling method for motor vehicle, involves outputting control signals to functional units of motor vehicle depending on threshold value for measuring signal, where threshold value is variably defined |
| US20140277825A1 (en) | 2013-03-12 | 2014-09-18 | Audi Ag | Vehicle signal lever proximity sensing for lane change intention detection with following recommendation to driver |
| US20140309855A1 (en) | 2013-04-12 | 2014-10-16 | Bao Tran | Smart car with automatic signalling |
| DE102013012121A1 (en) | 2013-07-19 | 2015-01-22 | Audi Ag | Method for operating at least one driver assistance system of a motor vehicle and driver assistance system for a motor vehicle |
| DE102016208410A1 (en) | 2016-05-17 | 2017-11-23 | Robert Bosch Gmbh | Method and device for operating a signal system, signal system, vehicle |
| US20180118100A1 (en) | 2016-10-28 | 2018-05-03 | Volvo Car Corporation | Road vehicle turn signal assist system and method |
| US20200150776A1 (en) | 2015-05-27 | 2020-05-14 | Google Llc | Gesture Detection and Interactions |
| US20210394645A1 (en) | 2020-06-19 | 2021-12-23 | Toyota Motor North America, Inc. | Weight and pressure related validation |
-
2023
- 2023-04-11 DE DE102023109090.9A patent/DE102023109090B3/en active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102007020936A1 (en) | 2007-05-04 | 2008-12-04 | Volkswagen Ag | Functional units e.g. horn, controlling method for motor vehicle, involves outputting control signals to functional units of motor vehicle depending on threshold value for measuring signal, where threshold value is variably defined |
| US20140277825A1 (en) | 2013-03-12 | 2014-09-18 | Audi Ag | Vehicle signal lever proximity sensing for lane change intention detection with following recommendation to driver |
| US20140309855A1 (en) | 2013-04-12 | 2014-10-16 | Bao Tran | Smart car with automatic signalling |
| DE102013012121A1 (en) | 2013-07-19 | 2015-01-22 | Audi Ag | Method for operating at least one driver assistance system of a motor vehicle and driver assistance system for a motor vehicle |
| US20200150776A1 (en) | 2015-05-27 | 2020-05-14 | Google Llc | Gesture Detection and Interactions |
| DE102016208410A1 (en) | 2016-05-17 | 2017-11-23 | Robert Bosch Gmbh | Method and device for operating a signal system, signal system, vehicle |
| US20180118100A1 (en) | 2016-10-28 | 2018-05-03 | Volvo Car Corporation | Road vehicle turn signal assist system and method |
| US20210394645A1 (en) | 2020-06-19 | 2021-12-23 | Toyota Motor North America, Inc. | Weight and pressure related validation |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3529679B1 (en) | Method and device for assisting a driver with deactivating a highly automated driving mode of a vehicle | |
| EP2086785A1 (en) | Method and device for driver state detection | |
| WO2006037696A1 (en) | Method and device for driver assistance | |
| DE102016009709A1 (en) | Method for operating a steering wheel with a grip detection by means of contour recognition | |
| DE102016215291A1 (en) | Method for classifying driver movements | |
| DE102015001686B4 (en) | Method and device for detecting a driver's responsiveness in automated driving | |
| DE102016206694B4 (en) | Assistance system and method of a highly automated vehicle to improve interaction with other road users | |
| WO2021058205A1 (en) | Method for operating a vehicle | |
| DE102016210452B4 (en) | Method and device for a vehicle with an emergency assistance unit | |
| DE102015107392A1 (en) | Method for detecting an object in an environment of a motor vehicle based on fused sensor data, control device, driver assistance system and motor vehicle | |
| EP3409551A1 (en) | Method and device for supporting a vehicle occupant located in a vehicle | |
| WO2017102188A1 (en) | Method and device for controlling at least one driver interaction system | |
| WO2020216562A1 (en) | Method for determining a safety level of a target function of a vehicle, safety system and vehicle | |
| DE102020104535A1 (en) | Method for supporting an occupant when getting out of a vehicle, taking into account follow-up objects, computing device and driver assistance system | |
| WO2020058006A1 (en) | Method for classifying a non-driving activity of a driver in respect of an interruptibility of the non-driving activity in the event of a prompt to take over the driving function, and method for re-releasing a non-driving activity following an interruption of said non-driving activity as a result of a prompt to takeover the driving function | |
| DE102019204892A1 (en) | Method and control device for detecting drowsiness of a driver for a driver assistance system for a vehicle | |
| DE102023109090B3 (en) | Motor vehicle and method for distinguishing between intentional and unintentional activation of a direction indicator of a motor vehicle | |
| DE102018219290A1 (en) | Method for teaching a personalized headlight device of a motor vehicle | |
| DE102019129904A1 (en) | Automatic driving competence analysis | |
| DE102018210367A1 (en) | Driver assistance system, vehicle, method for operating the driver assistance system, computer program and computer-readable storage medium | |
| DE102018206237A1 (en) | Method and device for detecting fatigue of a person | |
| DE102021003597A1 (en) | Method for influencing the behavior of at least one occupant in a vehicle | |
| DE102021101805A1 (en) | DRIVER MONITORING SYSTEM FOR MOTOR VEHICLES | |
| DE102018122490A1 (en) | Method for determining a driver's fatigue, method for driving a vehicle, and driver assistance system | |
| DE102019215308A1 (en) | Method for activating and / or adapting an automated driving function for an at least partially automated vehicle |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R012 | Request for examination validly filed | ||
| R018 | Grant decision by examination section/examining division |