DE102019208434A1 - Method and system for controlling a driving or vehicle function - Google Patents
Method and system for controlling a driving or vehicle function Download PDFInfo
- Publication number
- DE102019208434A1 DE102019208434A1 DE102019208434.6A DE102019208434A DE102019208434A1 DE 102019208434 A1 DE102019208434 A1 DE 102019208434A1 DE 102019208434 A DE102019208434 A DE 102019208434A DE 102019208434 A1 DE102019208434 A1 DE 102019208434A1
- Authority
- DE
- Germany
- Prior art keywords
- user
- user input
- vehicle
- driving
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Lock And Its Accessories (AREA)
Abstract
Die Erfindung beschreibt ein Verfahren zur Steuerung zumindest einer Fahr- oder Fahrzeugfunktion eines Fahrzeugs (1) mittels einer aktuellen Nutzereingabe mit den folgenden Schritten:- Erfassen (S1) eines Nutzers (2) eines Fahrzeugs (1) mittels zumindest einem ersten Sensor (3);- Erfassen (S2) einer aktuellen Nutzereingabe mittels des ersten oder zumindest eines weiteren Sensors (3) des Fahrzeugs (1);- Vergleichen (S3) der aktuellen Nutzereingabe mit gespeicherten Nutzereingaben;- Aktivieren (S4) einer Fahr- oder Fahrzeugfunktion basierend auf einer Übereinstimmung einer erfassten aktuellen Nutzereingabe mit einer gespeicherten Nutzereingabe.The invention describes a method for controlling at least one driving or vehicle function of a vehicle (1) by means of a current user input with the following steps: - Detecting (S1) a user (2) of a vehicle (1) by means of at least one first sensor (3) - Detecting (S2) a current user input by means of the first or at least one further sensor (3) of the vehicle (1); - Comparing (S3) the current user input with stored user inputs; - Activating (S4) a driving or vehicle function based on a match between a captured current user input and a stored user input.
Description
Die Erfindung betrifft ein Verfahren zur Steuerung einer Fahr- oder Fahrzeugfunktion sowie ein System zur Durchführung des Verfahrens.The invention relates to a method for controlling a driving or vehicle function and a system for carrying out the method.
Aus dem Stand der Technik ist bekannt, dass Fahr- bzw. Fahrzeugfunktionen wie beispielsweise das Öffnen des Kofferraums oder der Spurwechselwunsch bei einem Level 3+ Fahrzeug über die Aktivierung eines spezifischen Bedienelements gesteuert werden. Zum Beispiel durch Betätigen des Blinkers/Berühren des Sensors zur Kofferraumöffnung.It is known from the prior art that driving or vehicle functions such as opening the trunk or the request to change lanes in a level 3+ vehicle are controlled by activating a specific operating element. For example, by activating the indicator / touching the sensor for opening the trunk.
Problematisch bei diesen Steuerungen ist, dass diese im Fahrzeug fest vorgegeben sind oder sich nur sehr begrenzt umkonfigurieren lassen.The problem with these controls is that they are fixed in the vehicle or can only be reconfigured to a very limited extent.
Es ist demnach eine Aufgabe der vorliegenden Erfindung ein Verfahren bereitzustellen, welches die Steuerung von Fahr- bzw. Fahrzeugfunktionen verbessert.It is accordingly an object of the present invention to provide a method which improves the control of driving or vehicle functions.
Diese Aufgabe wird durch den Gegenstand der unabhängigen Ansprüche 1 und 6 gelöst.This object is achieved by the subject matter of
Mit zunehmender Anzahl der Fahr- und Fahrzeugfunktionen steigt der Bedarf an entsprechender Sensorik, was mit zunehmender Komplexität bzw. Kosten verbunden ist.As the number of driving and vehicle functions increases, the need for appropriate sensors increases, which is associated with increasing complexity and costs.
Zudem wurde in ersten Überlegungen festgestellt, dass Situationen denkbar sind, in welchen der Fahrer, bspw. durch körperliche Einschränkungen, nicht in der Lage ist bestimmte Sensoren zu bedienen.In addition, it was established in initial considerations that situations are conceivable in which the driver, for example due to physical limitations, is not able to operate certain sensors.
Erfindungsgemäß wird deshalb ein Verfahren zur Steuerung zumindest einer Fahr- oder Fahrzeugfunktion eines Fahrzeugs mittels einer aktuellen Nutzereingabe mit den folgenden Schritten vorgeschlagen:
- - Erfassen eines Nutzers eines Fahrzeugs mittels zumindest einem ersten Sensor;
- - Erfassen einer aktuellen Nutzereingabe mittels des ersten oder zumindest eines weiteren Sensors des Fahrzeugs;
- - Vergleichen der aktuellen Nutzereingabe mit gespeicherten Nutzereingaben;
- - Aktivieren einer Fahr- oder Fahrzeugfunktion basierend auf einer Übereinstimmung einer erfassten aktuellen Nutzereingabe mit einer gespeicherten Nutzereingabe.
- - Detecting a user of a vehicle by means of at least one first sensor;
- - Detecting a current user input by means of the first or at least one further sensor of the vehicle;
- - Comparing the current user input with stored user input;
- - Activation of a driving or vehicle function based on a match between a recorded current user input and a stored user input.
Der erste Sensor sowie auch der zumindest eine weitere Sensor können beispielsweise eine Frontkamera, eine Kamera eines Surroundviewsystems, eine Innenraumkamera, ein Radar oder ein Lidarsensor sein. Beispielsweise kann ein Nutzer eines Fahrzeugs mittels einer Frontkamera erfasst werden, wenn er sich auf das Fahrzeug zubewegt. Er kann daraufhin eine Nutzereingabe in Form einer Geste durchführen, welche daraufhin je nach Position des Nutzers entweder ebenfalls von der Frontkamera erfasst wird, oder wenn sich der Nutzer außerhalb des Sichtfeldes der Frontkamera befindet, beispielsweise mittels einer Kamera des Surroundviewsystems. Mit der Nutzereingabe kann daraufhin beispielsweise der Kofferraum geöffnet werden.The first sensor and also the at least one further sensor can be, for example, a front camera, a camera of a surround view system, an interior camera, a radar or a lidar sensor. For example, a user of a vehicle can be detected by means of a front camera when he is moving towards the vehicle. He can then perform a user input in the form of a gesture, which is then either also captured by the front camera, depending on the position of the user, or when the user is outside the field of view of the front camera, for example by means of a camera of the surround view system. The user input can then be used, for example, to open the trunk.
Die gespeicherten Nutzereingaben werden von jedem Nutzer einzeln im Rahmen einer Fahrzeugkonfiguration dem System antrainiert und gespeichert. Die Geste muss ggf. einige Male wiederholt werden, um eine robuste Erkennung zu gewährleisten.The saved user inputs are trained and saved in the system individually by each user as part of a vehicle configuration. The gesture may have to be repeated a few times to ensure robust recognition.
Denkbare Fahr- oder Fahrzeugfunktionen wären: Öffnen der Türen, öffnen des Kofferraums und insbesondere für körperlich beeinträchtigte Personen: Öffnen der Türen und Ausfahren einer Rampe für einen Rollstuhl. Weiterhin ist ebenfalls die Aktivierung des Blinkers während der Fahrt, die Aktivierung der Scheibenwischer oder die Aktivierung der Scheibenwaschanlage denkbar.Conceivable driving or vehicle functions would be: opening the doors, opening the trunk and especially for physically handicapped people: opening the doors and extending a ramp for a wheelchair. Activation of the indicator while driving, activation of the windscreen wipers or activation of the windscreen washer system is also conceivable.
In einer besonders bevorzugten Ausführungsform wird nach dem Erfassen des Nutzers eine Identifikation des Nutzers basierend auf zumindest einem vorbestimmten Identifikationskriterium durchgeführt. Ein Identifikationskriterium kann beispielsweise eine Gesichtserkennung mittels Front- oder Innenraumkamera darstellen. Denkbar wäre auch den Nutzer aufgrund des Gesamterscheinungsbildes, also Körpergröße, Körperhaltung, dauerhaft mitgeführte Hilfsmittel wie ein Rollstuhl, Krücken oder dergleichen, zu identifizieren. Zusätzlich hierzu kann beispielsweise als zweites Kriterium das Signal des Autoschlüssels abgefragt werden, um den Nutzer eindeutig zu identifizieren. Ebenfalls denkbar wäre ein spezielle Nutzereingabe, welche als Identifikationskriterium abgespeichert ist.In a particularly preferred embodiment, after the user has been recorded, the user is identified based on at least one predetermined identification criterion. An identification criterion can, for example, be facial recognition using a front or interior camera. It would also be conceivable to identify the user on the basis of the overall appearance, that is, body size, body posture, aids that are permanently carried along, such as a wheelchair, crutches or the like. In addition, the signal of the car key can be queried as a second criterion, for example, in order to clearly identify the user. A special user input that is stored as an identification criterion would also be conceivable.
Weiterhin werden bevorzugt nach eindeutiger Identifikation des Nutzers die dem Nutzer zugeordneten gespeicherten Nutzereingaben für den Vergleich mit der aktuellen Nutzereingabe bereitgestellt. Dies ist vor allem dann vorteilhaft, wenn mehrere Nutzer dasselbe Fahrzeug verwenden. Hierdurch kann ein schnellerer Vergleich ermöglicht werden, da in diesem Fall nur die jeweiligen Nutzerspezifischen Eingaben verglichen werden und nicht die Eingaben aller Nutzer. Dies trägt weiterhin dazu bei Fehlerkennungen der Nutzereingaben zu minimieren, da bei mehreren Nutzern potentiell die Möglichkeit besteht, dass unterschiedliche Nutzer gleiche Eingaben für unterschiedliche Funktionen festlegen.Furthermore, after the user has been clearly identified, the stored user inputs assigned to the user are preferably made available for comparison with the current user input. This is particularly advantageous when several users use the same vehicle. This enables a faster comparison, since in this case only the respective user-specific inputs are compared and not the inputs of all users. This also helps to minimize incorrect identification of the user inputs, since with several users there is a potential for different users to define the same inputs for different functions.
In einer weiteren bevorzugten Ausgestaltung ist die Nutzereingabe eine bestimmte Geste oder ein Bewegungsablauf. Die Bewegungen werden mit den Armen und/oder Händen durchgeführt. Dies ist vorteilhaft, da sich mittels Gesten und Bewegungsabläufen eine Vielzahl unterschiedlicher Eingaben realisieren lassen. Denkbar wäre hier die Ausführung von Bewegungen in verschiedenen geometrischen Formen wie Kreise, Rechtecke oder Dreiecke. Weiterhin wären aufeinanderfolgende mehrfache horizontale und/oder vertikale Bewegungen denkbar.In a further preferred embodiment, the user input is a specific gesture or a movement sequence. The movements are performed with the arms and / or hands. This is advantageous because a large number of different inputs can be implemented using gestures and movement sequences. The execution of movements in various geometric shapes such as circles, rectangles or triangles would be conceivable here. Successive multiple horizontal and / or vertical movements would also be conceivable.
Wichtig ist hierbei, dass sich diese Eingaben von Bewegungen unterscheiden, welche bei der üblichen Verwendung des Fahrzeugs auftreten, wie z.B. bei einem Lenkvorgang. Somit muss sich beispielsweise die Eingabe für eine Spurwechselabsicht beispielsweise zur Aktivierung des Blinkers oder für einen autonomen Spurwechsel von einer normalen Lenktätigkeit unterscheiden. Um dies zu gewährleisten könnte von Seiten des Herstellers bereits eine Auswahl von ausgeschlossenen Nutzereingaben vorgegeben werden.It is important here that these inputs differ from movements that occur during normal use of the vehicle, e.g. during a steering process. Thus, for example, the input for an intention to change lanes, for example to activate the turn signal or for an autonomous lane change, must differ from normal steering activity. In order to guarantee this, the manufacturer could already specify a selection of excluded user inputs.
Denkbar wären hier auch Sprachbefehle als Nutzereingabe zuzulassen. Für die Sprachbefehle wäre es notwendig zumindest einen der Sensoren als Mikrofon auszugestalten, welches die Eingaben in und/oder von außerhalb des Fahrzeugs aufnehmen kann.It would also be conceivable to allow voice commands as user input here. For the voice commands, it would be necessary to configure at least one of the sensors as a microphone that can pick up the inputs in and / or from outside the vehicle.
In einer besonders bevorzugten Ausführungsform ist eine Datenrepräsentation bei der Erfassung des Nutzers eine Skelettdarstellung. Die Skelettdarstellung ist vorteilhaft, da hierdurch unter anderem die Bewegung der Arme eindeutig erfasst werden kann. Weiterhin ist ein Vorteil dieser Darstellung, dass diese niedrigdimensional ist und die Diskrimination von Gesten erlaubt.In a particularly preferred embodiment, a data representation when the user is recorded is a skeleton representation. The skeleton representation is advantageous because it allows, among other things, the movement of the arms to be clearly recorded. A further advantage of this representation is that it is low-dimensional and allows the discrimination of gestures.
Weiterhin wird erfindungsgemäß ein System zur Durchführung eines erfindungsgemäßen Verfahrens vorgeschlagen, umfassend einen ersten Sensor und zumindest einen weiteren Sensor zum Erfassen eines Nutzers sowie einer Nutzereingabe, eine Bildverarbeitungseinheit, eine Speichereinheit zum Speichern von spezifischen Nutzereingaben, eine Recheneinheit zum Vergleichen aktueller und gespeicherter Nutzereingaben sowie eine Steuereinheit zum Ansteuern einer entsprechenden Fahr- bzw. Fahrzeugfunktion.Furthermore, according to the invention, a system for performing a method according to the invention is proposed, comprising a first sensor and at least one further sensor for detecting a user and a user input, an image processing unit, a memory unit for storing specific user inputs, a computing unit for comparing current and stored user inputs and a Control unit for controlling a corresponding driving or vehicle function.
In einer besonders bevorzugten Ausführungsform des Systems ist die Recheneinheit weiter dazu ausgebildet eine Identifizierung des Nutzers durchzuführen.In a particularly preferred embodiment of the system, the computing unit is further designed to identify the user.
Weiterhin ist bevorzugt, dass in der Speichereinheit zumindest ein Identifikationskriterium zur Identifizierung eines Nutzers vorhanden ist.It is also preferred that at least one identification criterion for identifying a user is present in the memory unit.
Weitere vorteilhafte Ausgestaltungen und Ausführungsformen ergeben sich aus den Zeichnungen. Darin zeigen:
-
1 : eine schematische Darstellung eines Fahrzeugs bei der Erkennung eines Nutzers während der Nutzereingabe; -
2 : ein schematisches Ablaufdiagramm einer Ausführungsform der Erfindung.
-
1 : a schematic representation of a vehicle when a user is recognized during user input; -
2 : a schematic flow diagram of an embodiment of the invention.
BezugszeichenlisteList of reference symbols
- 11
- Fahrzeugvehicle
- 22
- NutzerUsers
- 33
- Sensorsensor
- 44th
- KofferraumklappeTrunk lid
- EE.
- ErfassungsbereichDetection area
- αα
- ÖffnungswinkelOpening angle
- S1-S4S1-S4
- VerfahrensschritteProcedural steps
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102019208434.6A DE102019208434A1 (en) | 2019-06-11 | 2019-06-11 | Method and system for controlling a driving or vehicle function |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102019208434.6A DE102019208434A1 (en) | 2019-06-11 | 2019-06-11 | Method and system for controlling a driving or vehicle function |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102019208434A1 true DE102019208434A1 (en) | 2020-12-17 |
Family
ID=73547223
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102019208434.6A Pending DE102019208434A1 (en) | 2019-06-11 | 2019-06-11 | Method and system for controlling a driving or vehicle function |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102019208434A1 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102012020607B4 (en) * | 2012-10-19 | 2015-06-11 | Audi Ag | A motor vehicle with a gesture control device and method for controlling a selection element |
DE102015225374A1 (en) * | 2015-12-16 | 2017-06-22 | Bayerische Motoren Werke Aktiengesellschaft | Arrangement, means of locomotion and method for guiding a means of transportation |
-
2019
- 2019-06-11 DE DE102019208434.6A patent/DE102019208434A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102012020607B4 (en) * | 2012-10-19 | 2015-06-11 | Audi Ag | A motor vehicle with a gesture control device and method for controlling a selection element |
DE102015225374A1 (en) * | 2015-12-16 | 2017-06-22 | Bayerische Motoren Werke Aktiengesellschaft | Arrangement, means of locomotion and method for guiding a means of transportation |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2200858B9 (en) | Vehicle system comprising an assistance functionality | |
DE102017216837A1 (en) | Gesture and facial expression control for a vehicle | |
EP3411259B1 (en) | Operating device and method for receiving a character sequence from a user in a motor vehicle | |
DE102016009709A1 (en) | Method for operating a steering wheel with a grip detection by means of contour recognition | |
DE102011010594A1 (en) | Method, apparatus and computer program product for driving a functional unit of a vehicle | |
EP3119647B1 (en) | Method and device for actuating a closing element for a vehicle | |
DE102015224555A1 (en) | Method for operating a vehicle | |
DE102010018105A1 (en) | Motor vehicle cockpit comprises operating unit for detecting user inputs, where outlet of climate control and ventilation unit is arranged in motor vehicle cockpit | |
DE102020102966A1 (en) | DETECTION OF DIFFERENT INPUTS | |
DE102016210452B4 (en) | Method and device for a vehicle with an emergency assistance unit | |
DE102016206694A1 (en) | Assistance system and procedure of a highly automated vehicle to improve interaction with other road users | |
DE10308415B3 (en) | Seat setting control process for vehicles involves filming and storing person's seated position and using control unit to set seat accordingly | |
DE102010038966A1 (en) | Method for supporting parking process of vehicle, involves executing comparison of vehicle position with deposited parking situation, where parking situation is assigned to parking surface | |
DE102014202324A1 (en) | Method and device for safe parking of a vehicle | |
DE102019208434A1 (en) | Method and system for controlling a driving or vehicle function | |
DE102013007256A1 (en) | Method for personalized operation of a graphic user interface of a motor vehicle and motor vehicle with such a graphical user interface | |
EP3593217A1 (en) | Method for executing an autonomous driving operation of a vehicle | |
DE102018210450A1 (en) | Method for outputting control signals for controlling an automated vehicle | |
DE102014223277B4 (en) | Method and device for adjusting the position of a windshield wiper of a vehicle | |
DE102021005092A1 (en) | Method and device for recognizing emotional states of occupants of a vehicle | |
DE102017007120A1 (en) | Remote control method | |
DE102021101660A1 (en) | Method and device for providing user guidance for a vehicle user | |
DE102019206447A1 (en) | Method for performing a maneuvering process of a motor vehicle with camera-based determination of a distance to the motor vehicle, as well as maneuvering assistance system | |
DE102014202833A1 (en) | User interface and method for switching from a first user interface operating mode to a 3D gesture mode | |
DE102016009554A1 (en) | Method for monitoring a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R163 | Identified publications notified | ||
R081 | Change of applicant/patentee |
Owner name: CONTINENTAL AUTONOMOUS MOBILITY GERMANY GMBH, DE Free format text: FORMER OWNER: CONTI TEMIC MICROELECTRONIC GMBH, 90411 NUERNBERG, DE |