DE102017000461B4 - Method for opening and closing a vehicle door - Google Patents

Method for opening and closing a vehicle door Download PDF

Info

Publication number
DE102017000461B4
DE102017000461B4 DE102017000461.7A DE102017000461A DE102017000461B4 DE 102017000461 B4 DE102017000461 B4 DE 102017000461B4 DE 102017000461 A DE102017000461 A DE 102017000461A DE 102017000461 B4 DE102017000461 B4 DE 102017000461B4
Authority
DE
Germany
Prior art keywords
vehicle door
vehicle
door
gesture
arm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102017000461.7A
Other languages
German (de)
Other versions
DE102017000461A1 (en
Inventor
Thomas Kälberer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mercedes Benz Group AG
Original Assignee
Mercedes Benz Group AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mercedes Benz Group AG filed Critical Mercedes Benz Group AG
Publication of DE102017000461A1 publication Critical patent/DE102017000461A1/en
Application granted granted Critical
Publication of DE102017000461B4 publication Critical patent/DE102017000461B4/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/73Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/73Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • E05F2015/767Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects using cameras
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05YINDEXING SCHEME ASSOCIATED WITH SUBCLASSES E05D AND E05F, RELATING TO CONSTRUCTION ELEMENTS, ELECTRIC CONTROL, POWER SUPPLY, POWER SIGNAL OR TRANSMISSION, USER INTERFACES, MOUNTING OR COUPLING, DETAILS, ACCESSORIES, AUXILIARY OPERATIONS NOT OTHERWISE PROVIDED FOR, APPLICATION THEREOF
    • E05Y2900/00Application of doors, windows, wings or fittings thereof
    • E05Y2900/50Application of doors, windows, wings or fittings thereof for vehicles

Landscapes

  • Lock And Its Accessories (AREA)
  • Power-Operated Mechanisms For Wings (AREA)

Abstract

Verfahren zum Öffnen und Schließen einer Fahrzeugtür, aufweisend folgende Schritte:-Erfassung von Bilddaten in einem Fahrzeuginnenraum und/oder in einem Schwenkbereich der Fahrzeugtür (2),-Auswerten der Bilddaten, wobei bei Erkennung einer vorbestimmten Geste eines Insassen (5) die Fahrzeugtür (2) geöffnet oder geschlossen wird dadurch gekennzeichnet, dass die vorbestimmte Geste eine zu einem Entriegelungshebel (4) oder einem Türgriff der Fahrzeugtür (2) zeigende Armgeste des lnsassen (5) des Fahrzeugs ist, wobei die Armgeste durch im Wesentlichen in einer Flucht liegende Gelenkpositionen (7, 8, 9, 10) von mindestens drei der Gelenke von Schulter (7), Ellbogen (8), Hand (9) oder Finger (10) des Armes definiert ist und wobei die Fahrzeugtür (2) in Abhängigkeit von aus den Bilddaten bestimmten Körpermaßen eines Insassen (5) geöffnet oder geschlossen wird.Method for opening and closing a vehicle door, having the following steps: - acquisition of image data in a vehicle interior and/or in a pivoting area of the vehicle door (2), - evaluation of the image data, with the vehicle door ( 2) opening or closing is characterized in that the predetermined gesture is an arm gesture of the occupant (5) of the vehicle pointing to a release lever (4) or a door handle of the vehicle door (2), the arm gesture through substantially aligned joint positions (7, 8, 9, 10) of at least three of the joints of the shoulder (7), elbow (8), hand (9) or finger (10) of the arm is defined and wherein the vehicle door (2) depending on from the Image data specific body dimensions of an occupant (5) is opened or closed.

Description

Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum Öffnen und Schließen einer Fahrzeugtür.The invention relates to a method and a device for opening and closing a vehicle door.

Im Allgemeinen ist bekannt, dass zum Öffnen und Schließen einer Fahrzeugtür, insbesondere als Zugang zu oder Ausgang aus einem Fahrzeuginnenraum, manuell ein Entriegelungshebel betätigt oder an einem Türgriff gezogen wird.In general, it is known that, in order to open and close a vehicle door, in particular as access to or exit from a vehicle interior, an unlocking lever is actuated manually or a door handle is pulled.

Aus der DE102014008430 A1 ist weiterhin ein Kraftfahrzeug mit einer Detektionseinheit zur Erfassung von Gesten bekannt, wobei bei Erkennung einer vorbestimmten Armgeste ein Signal an Aktoren zur Betätigung einer Türe übermittelt wird.From the DE102014008430 A1 a motor vehicle with a detection unit for detecting gestures is also known, with a signal being transmitted to actuators for actuating a door when a predetermined arm gesture is detected.

Aus der WO 2016/008 987 A1 ist ein Verfahren und eine Steuereinrichtung zum automatischen Öffnen einer Kraftfahrzeugtür bekannt. Hierbei wird ein kamerabasierter Gestensensor verwendet, der beispielsweise eine Handgestik eines Insassen mittels einer Kamera aufnimmt und diese Handgestik als Öffnungswunsch zum Öffnen der Tür interpretiert.From the WO 2016/008 987 A1 a method and a control device for automatically opening a motor vehicle door are known. A camera-based gesture sensor is used here, which, for example, uses a camera to record an occupant's hand gesture and interprets this hand gesture as a request to open the door.

Der Erfindung liegt die Aufgabe zugrunde, ein gegenüber dem Stand der Technik verbessertes Verfahren zum Öffnen und Schließen einer Fahrzeugtür anzugeben.The invention is based on the object of specifying a method for opening and closing a vehicle door that is improved over the prior art.

Die Aufgabe wird erfindungsgemäß durch das in Anspruch 1 angegebene Verfahren und die in Anspruch 6 angegebene Vorrichtung gelöst.The object is achieved according to the invention by the method specified in claim 1 and the device specified in claim 6 .

Vorteilhafte Ausgestaltungen der Erfindung sind Gegenstand der Unteransprüche.Advantageous configurations of the invention are the subject matter of the dependent claims.

Ein Verfahren zum Öffnen und Schließen einer Fahrzeugtür eines Fahrzeuges sieht erfindungsgemäß vor, dass mittels erfasster Bilddaten eine vorbestimmte Geste eines Insassen, d.h. eine zu einem vorgegebenen Türbereich zeigende Armgeste, insbesondere zu einem Entriegelungshebel oder einem Türgriff der Fahrzeugtür, erkannt wird und bei Erkennen einer solchen vorbestimmten Geste die Fahrzeugtür automatisch geöffnet oder geschlossen wird. Unter Armgeste ist im Folgenden das Einnehmen einer vorbestimmten Armstellung, eine Bewegung des Armes in eine vorbestimmte Positionierung und/oder ein Halten des Armes in dieser Positionierung für eine bestimmbare Zeitdauer zu verstehen.Dadurch, dass die Fahrzeugtür allein mittels der vorbestimmten Geste automatisch geöffnet und geschlossen wird, ist ein Bedienkomfort im Fahrzeug erhöht. Erfindungsgemäß erfolgt ein Schließen oder Öffnen der Fahrzeugtür in Abhängigkeit von aus den Bilddaten bestimmten Körpermaßen eines Insassen. Mithilfe der Körpermaße kann bestimmt werden, ob ein Insasse ein Erwachsener oder ein Kind ist. In vorteilhafter Weise kann hiermit eine Gestenbedienung der Fahrzeugtür für ausgewählte Personenkreise, d.h. beispielsweise für Kinder unterbunden und nur für Erwachsene zugelassen werden.According to the invention, a method for opening and closing a vehicle door of a vehicle provides that a predetermined gesture of an occupant, i.e. an arm gesture pointing to a predetermined door area, in particular to an unlocking lever or a door handle of the vehicle door, is recognized by means of captured image data and upon recognition of such predetermined gesture the vehicle door is automatically opened or closed. In the following, an arm gesture is to be understood as taking a predetermined arm position, moving the arm into a predetermined position and/or holding the arm in this position for a determinable period of time. Because the vehicle door is automatically opened and closed solely by means of the predetermined gesture is, an ease of use in the vehicle is increased. According to the invention, the vehicle door is closed or opened as a function of the body measurements of an occupant determined from the image data. Body measurements can be used to determine whether an occupant is an adult or a child. In an advantageous manner, gesture operation of the vehicle door can be prevented for selected groups of people, i.e. for example for children, and only allowed for adults.

Insbesondere für Insassen im Fondbereich, die sich in einer Liegeposition befinden, kann es anstrengend sein, die Fahrzeugtür manuell zu öffnen oder zu schließen, so dass diese Anstrengung mittels des Verfahrens entfällt. Das Verfahren vermeidet insbesondere beim Schließen einer geöffneten Tür, dass ein Insasse zum Ergreifen des Türgriffs seinen Oberkörper in Richtung offenstehende Türe vorbeugen muss. Eine zu einem Entriegelungshebel oder einem Türgriff der Fahrzeugtür zeigende Armgeste ist eine natürliche Bewegung, die wenig Kraftaufwand erfordert und eine intuitive Betätigung der Tür ermöglicht. Des Weiteren wird durch die Verwendung des Verfahrens für den jeweiligen Insassen ein Gefühl einer Vorhersage vermittelt, dass das Fahrzeug mitdenkt und zuvorkommend reagiert, wie ein Chauffeur. Dadurch ist ein Komfort gesteigert und ein erlebbarer Luxus, insbesondere in einer Limousine als Fahrzeug, erhöht.In particular for passengers in the rear area who are in a reclining position, it can be strenuous to open or close the vehicle door manually, so that this effort is eliminated using the method. The method avoids, in particular when closing an open door, that an occupant has to bend his upper body in the direction of the open door in order to grasp the door handle. An arm gesture pointing to a release lever or a door handle of the vehicle door is a natural movement that requires little effort and allows intuitive operation of the door. Furthermore, the use of the method gives the respective occupant a feeling of a prediction that the vehicle thinks along and reacts courteously, like a chauffeur. This increases comfort and increases the level of luxury that can be experienced, particularly in a sedan as the vehicle.

Erfindungsgemäß wird die die zu einem Entriegelungshebel oder einem Türgriff der Fahrzeugtür zeigende Armgeste durch im Wesentlichen in einer Flucht liegende Gelenkpositionen des Armes, insbesondere von mindestens drei der Gelenke von Schulter, Ellbogen, Hand oder Finger, erkannt. Über die Auswertung der Bilddaten erfolgt eine Erkennung von Gelenkpunkten, sobald die Gelenkpunkte im Wesentlichen einer Flucht liegen und in Richtung Entriegelungshebel oder einem Türgriff der Fahrzeugtür zeigen, kann zuverlässig auf den Wunsch eines Insassen geschlossen werden, dass die Tür betätigt werden soll. Bevorzugt wird die Gelenkposition des Zeigefingers ausgewertet, da im Normalfall ein Insasse mit dem Zeigefinger auf die Tür zeigt. Unter einer Flucht liegenden Gelenkpunkten ist zu verstehen, dass die Gelenkpunkte auf einer Geraden liegen. Unter im Wesentlichen in einer Flucht liegenden Gelenkpunkten ist zu verstehen, dass die Gelenkpunkte nicht exakt auf der Geraden liegen sondern vorbestimmte Abweichungen von der Geraden zulässig sind, es wird sozusagen ein Toleranzbereich definiert, in dem die Gelenkpositionen liegen müssen um im Wesentlichen in einer Flucht zu liegen. Beispielsweise kann definiert sein, dass die Gelenkpunkte im Wesentlichen in einer Flucht liegen, soweit diese zwischen zwei paralleler Geraden mit vorbestimmten Abstand liegen.According to the invention, the arm gesture pointing to an unlocking lever or a door handle of the vehicle door is recognized by essentially aligned joint positions of the arm, in particular by at least three of the joints of the shoulder, elbow, hand or finger. Articulation points are recognized by evaluating the image data, as soon as the articulation points are essentially aligned and point in the direction of the unlocking lever or a door handle of the vehicle door, it can be reliably concluded that the occupant wants the door to be operated. The joint position of the index finger is preferably evaluated, since an occupant normally points to the door with his index finger. Joint points lying in alignment should be understood to mean that the joint points lie on a straight line. Joint points that are essentially aligned mean that the joint points do not lie exactly on the straight line, but rather that predetermined deviations from the straight line are permissible. A tolerance range is defined, so to speak, in which the joint positions must lie in order to be essentially in alignment lay. For example, it can be defined that the articulation points are essentially aligned if they are between two parallel straight lines at a predetermined distance.

In einer bevorzugten Ausführungsform wird das automatische Öffnen oder Schließen der Fahrzeugtür bei einem Erkennen einer bevorstehenden Kollision eines Objektes mit der schwenkenden, d.h. öffnenden oder schließenden Fahrzeugtür verhindert oder abgebrochen. Bei Öffnen der Türe wird der Vorgang abgebrochen, sobald die Türe ein Objekt beispielsweise eine Wand, einen Poller oder ein parkendes Fahrzeug, berührt oder sich diesem annähert. Weiter kann auch die Öffnung der Fahrzeugtür bei einem herannahenden Objekt wie beispielsweise einem Fahrrad abgebrochen werden. Die Erfassung von Bilddaten zur Erkennung von Objekten beim Öffnen der Türe erfolgt mittels Sensoren beispielsweise einer Kamera, Ultraschallsensoren oder Radarsensoren zur Überwachung einer Fahrzeugumgebung. Gleichermaßen wird auch ein Schließvorgang abgebrochen, sobald sich ein Objekt im Schwenkbereich der Türe befindet. Anhand der ermittelten Bilddaten werden beispielsweise Umrisslinien des Insassen oder anderer Objekte bestimmt. Bevorzugt kann der Schließ- oder Öffnungsvorgang unterbrochen werden, sobald sich die Umrisslinien der Fahrzeugtüre und die Umrisslinien der Objekte, der Insassen oder eines Hindernis berühren oder sich auf einen vorgebbaren Abstand aneinander angenähert haben, so dass auch eine bevorstehende Kollision detektiert werden kann. Unter dem Begriff Umrisslinien sind in dem Zusammenhang Linien oder Linienscharen zur Beschreibung der Umrisse von Insassen, Objekten, der Fahrzeugtür oder des Aktionsraumes der Fahrzeugtür zu verstehen. Die Bilddaten werden von einem Sensor beispielsweise von einer Kamera ermittelt, die in vorteilhafter Weise derart angeordnet ist, dass neben dem Fahrzeuginnenraum auch der dem Fahrzeuginnenraum zugewandte Schwenkbereich der Tür erfasst wird. Der Erfassungsbereich der im Innenraum angeordneten Kamera zur Erkennung von Objekten erstreckt sich damit auch auf den Bereich außerhalb des Türausschnittes im Schwenkbereich der Türe. In vorteilhafter Weise wird eine Beschädigung der Türe oder eine Verletzung der Insassen vermieden.In a preferred embodiment, the automatic opening or closing of the vehicle door is prevented or stopped when an imminent collision of an object with the pivoting, ie opening or closing vehicle door is detected. When the door is opened the process is aborted as soon as the door touches or approaches an object such as a wall, a bollard or a parked vehicle. Furthermore, the opening of the vehicle door can also be interrupted if an object such as a bicycle approaches. Image data for detecting objects when the door is opened is captured using sensors, for example a camera, ultrasonic sensors or radar sensors for monitoring a vehicle environment. Likewise, a closing process is aborted as soon as an object is in the pivoting range of the door. Outline lines of the occupant or other objects, for example, are determined on the basis of the determined image data. The closing or opening process can preferably be interrupted as soon as the outlines of the vehicle door and the outlines of the objects, the occupants or an obstacle touch or have approached each other to a predeterminable distance, so that an impending collision can also be detected. In this context, the term contour lines is to be understood as meaning lines or groups of lines for describing the contours of occupants, objects, the vehicle door or the action space of the vehicle door. The image data is determined by a sensor, for example a camera, which is advantageously arranged in such a way that, in addition to the vehicle interior, the pivoting area of the door facing the vehicle interior is also recorded. The detection range of the camera arranged in the interior for detecting objects thus also extends to the area outside the door cutout in the pivoting range of the door. Damage to the door or injury to the occupants is advantageously avoided.

In einer bevorzugten Ausführungsform kann ein Öffnen und/oder Schließen der Fahrzeugtür durch eine vorbestimmte Abbruchgeste gestoppt werden. Die vorbestimmte Abbruchgeste umfasst eine der Tür zugewandt Handinnenfläche. Die Abbruchgeste ermöglicht einem Insassen seine Eingabe zu ändern und eine durch eine Geste eingeleiteten Öffnungs- und Schließvorgang vorzeitig abzubrechen.In a preferred embodiment, opening and/or closing of the vehicle door can be stopped by a predetermined cancellation gesture. The predetermined cancel gesture includes a palm facing the door. The cancel gesture allows an occupant to change their input and prematurely cancel a gesture-initiated opening and closing process.

Die erfindungsgemäße Vorrichtung steuert bei Erkennung einer auf einen Entriegelungshebel oder einen Türgriff der Fahrzeugtür zeigende Armgeste Aktoren zum Öffnen oder Schließen der Fahrzeugtüre an. Die Mittel zur Erfassung von Bilddaten, beispielsweise eine Kamera, ermitteln Bilddaten im Innenraum und/oder in einem Schwenkbereich der Fahrzeugtür. Durch die Überwachung des Schwenkbereiches der Fahrzeugtür ist ein aus dem Fahrzeuginnenraum rausragende vorbestimmte Geste erkennbar.Upon detection of an arm gesture pointing to an unlocking lever or a door handle of the vehicle door, the device according to the invention controls actuators for opening or closing the vehicle door. The means for capturing image data, for example a camera, determine image data in the interior and/or in a pivoting area of the vehicle door. By monitoring the pivoting range of the vehicle door, a predetermined gesture protruding from the vehicle interior can be detected.

Die Vorrichtung ermöglicht eine Betätigung der Fahrzeugtüre mit einer intuitiven Geste, in vorteilhafter Weise ist der Komfort zur Betätigung der Fahrzeugtüre gesteigert.The device enables the vehicle door to be actuated with an intuitive gesture, and the convenience for actuating the vehicle door is advantageously increased.

Ausführungsbeispiele der Erfindung werden im Folgenden anhand von Figuren näher erläutert.Exemplary embodiments of the invention are explained in more detail below with reference to figures.

Dabei zeigen die:

  • 1 schematisch eine perspektivische Ansicht eines Fahrzeuges mit einer im Fondbereich geöffneten Fahrzeugtür,
  • 2 ein Arm eines Insassen und
  • 3 ein Arm eines Insassen mit im Wesentlichen in einer Flucht liegenden Gelenken.
They show:
  • 1 schematically a perspective view of a vehicle with a vehicle door open in the rear area,
  • 2 an inmate's arm and
  • 3 an occupant's arm having substantially aligned joints.

Die einzige Figur zeigt ein Fahrzeug 1 mit einer im Fondbereich geöffneten Fahrzeugtür 2. Im Fahrzeuginnenraum ist eine Bilderfassungseinheit 3 derart angeordnet, dass ein Erfassungsbereich derselben in den Fahrzeuginnenraum gerichtet ist. Mittels der Bilderfassungseinheit 3 werden in einem vorgegebenen Zustand des Fahrzeuges 1, insbesondere im Zustand einer entriegelten Zentralverriegelungsvorrichtung, fortlaufend Bilddaten in Bezug auf den Fahrzeuginnenraum erfasst.The single FIGURE shows a vehicle 1 with a vehicle door 2 open in the rear area. An image capturing unit 3 is arranged in the vehicle interior in such a way that a capturing area thereof is directed into the vehicle interior. In a predefined state of the vehicle 1, in particular in the state of an unlocked central locking device, image data relating to the vehicle interior are continuously captured by means of the image capturing unit 3 .

An der Fahrzeugtür 2 ist innenseitig ein mit gestrichelter Linie dargestellter Entriegelungshebel 4 angeordnet, welcher zum Öffnen der Tür von einem Insassen 5 betätigt wird. Zum Schließen der Fahrzeugtür 2 hält der Insasse 5 üblicherweise einen nicht näher dargestellten Türgriff, an welchem gezogen wird.Arranged on the inside of the vehicle door 2 is an unlocking lever 4 shown with a dashed line, which is actuated by an occupant 5 to open the door. To close the vehicle door 2, the occupant 5 usually holds a door handle (not shown) which is pulled.

Aus einer bequemen Sitz- oder Liegeposition im Fondbereich des Fahrzeuges 1 ist der Entriegelungshebel 4 oder der Türgriff für den Insassen 5 verhältnismäßig weit entfernt und schwer zu erreichen. Das manuelle Öffnen und Schließen der Fahrzeugtür 2 erfordert daher immer einen Bewegungs- und somit einen Energieaufwand des Insassen 5, wodurch ein empfundener Komfort und Luxus insbesondere in einer Limousine als Fahrzeug 1 gemindert wird.From a comfortable sitting or lying position in the rear of the vehicle 1, the unlocking lever 4 or the door handle for the occupant 5 is relatively far away and difficult to reach. The manual opening and closing of the vehicle door 2 therefore always requires movement and thus energy expenditure on the part of the occupant 5, as a result of which the perceived comfort and luxury is reduced, particularly in a sedan as the vehicle 1.

Um den Aufwand, insbesondere für ältere Menschen als Insassen 5 des Fahrzeuges 1 in Bezug auf das Öffnen und Schließen der Fahrzeugtür 2 zu verringern, ist vorgesehen, dass die Fahrzeugtür 2 automatisch geöffnet und geschlossen wird.In order to reduce the effort, in particular for older people as occupants 5 of the vehicle 1, with regard to opening and closing the vehicle door 2, provision is made for the vehicle door 2 to be opened and closed automatically.

Hierzu werden die Bilddaten eines im Bereich der Fahrzeugtür 2 sitzenden Insassen 5, insbesondere im Stillstand des Fahrzeuges 1, erfasst und einer Steuereinheit zugeführt. Diese wertet die Bilddaten aus, wobei Eigenschaften dieses Insassen 5 ermittelt werden. Insbesondere werden Körpermaße, eine momentane Kopf- und Gelenkposition des Insassen 5 ermittelt.For this purpose, the image data of an occupant 5 sitting in the area of the vehicle door 2, in particular when the vehicle 1 is stationary, is recorded and fed to a control unit. This evaluates the image data, properties of this occupant 5 being determined. In particular, bodies dimensions, a current head and joint position of the occupant 5 is determined.

Durch die Auswertung der Bilddaten in Bezug auf den Insassen 5 ist es möglich, einen ausgestreckten Arm in Richtung des Entriegelungshebels 4 oder des Türgriffes zu detektieren und diese vorbestimmte Geste als Wunsch, die Fahrzeugtür 2 zu öffnen, zu interpretieren. Zusätzlich kann auch eine Haltung der Hand des Insassen 5 berücksichtigt werden. Bei geöffneter Tür wird bei Erkennung eines ausgestreckten Arms in Richtung des Türgriffes oder des Entriegelungshebels die Fahrzeugtür 2 geschlossen. Ein ausgestreckter Arm wird erkannt, sobald die Gelenkpositionen des Arms, d.h. insbesondere die Positionen des Schulter-, Ellbogen- und Handgelenkes im Wesentlichen in eine Flucht liegen.By evaluating the image data relating to the occupant 5, it is possible to detect an outstretched arm in the direction of the unlocking lever 4 or the door handle and to interpret this predetermined gesture as a desire to open the vehicle door 2. In addition, the position of the hand of the occupant 5 can also be taken into account. When the door is open, the vehicle door 2 is closed upon detection of an outstretched arm in the direction of the door handle or the unlocking lever. An outstretched arm is recognized as soon as the joint positions of the arm, i.e. in particular the positions of the shoulder, elbow and wrist are essentially aligned.

In 2. ist ein Arm 6 eines Insassen 5 mit einem Schultergelenk 7 leicht gebeugten Ellbogengelenk 8 und einem Handgelenk 9 gezeigt. Weiter sind zwei parallel beabstandete Linien 11, 12 gezeigt, mit Hilfe derer bestimmt wird, ob Schultergelenk 7, Ellbogengelenk 8 und Handgelenk 9 im Wesentlichen in einer Flucht liegen. Sobald die Gelenke zwischen den zwei Linien 11, 12 positioniert sind, liegen diese im Wesentliche in einer Flucht. Der Abstand der Linien 11, 12 definiert gewissermaßen eine einer natürlichen Armhaltung entsprechende zulässige Abweichung der Gelenkpositionen von vollständig in einer Flucht liegenden Gelenkpositionen. Vollständig in einer Flucht liegende Gelenkpositionen bedeuted demgegenüber, dass alle Gelenkpositionen genau auf einer einzigen Geraden zu liegen kommen. Die Armstellung gemäß 2 stellt somit keine vorbestimmte Geste zum Öffnen oder Schließen der Fahrzeugtüre 4 dar, da nur die Position von zwei Gelenken, d.h. von dem Schultergelenk 7 und dem Ellbogengelenk 8, zwischen den Linien 11 und 12 zu liegen kommen.In 2 . an arm 6 of an occupant 5 with a shoulder joint 7 slightly bent elbow joint 8 and a wrist 9 is shown. Two parallel, spaced lines 11, 12 are also shown, which are used to determine whether the shoulder joint 7, elbow joint 8 and wrist 9 are essentially aligned. Once positioned between the two lines 11, 12, the hinges are substantially aligned. The distance between the lines 11, 12 defines, so to speak, a permissible deviation of the joint positions from joint positions that are completely aligned, corresponding to a natural arm posture. In contrast, joint positions that are completely aligned mean that all joint positions come to lie exactly on a single straight line. The arm position according to 2 thus does not represent a predetermined gesture for opening or closing the vehicle door 4, since only the position of two joints, ie the shoulder joint 7 and the elbow joint 8, come to lie between the lines 11 and 12.

Demgegenüber ist in 3 eine Armstellung gezeigt, bei der die Position von drei Gelenken, d.h. dem Schultergelenk 7, dem Ellbogengelenk 8 und dem Handgelenkt 9, zwischen den zwei Linien 11, 12 liegen. Diese Armstellung wird als Armgeste interpretiert und damit als vorbestimmte Geste zum Öffnen oder Schließen der Fahrzeugtüre 4 identifiziert, sobald der Arm in Richtung einem Entriegelungshebel oder einem Türgriff der Fahrzeugtür 4 zeigt. Alternativ kann die Armgeste beispielsweise durch im Wesentlich in einer Flucht liegenden Schultergelenk 7, Ellbogengelenk 8 und Fingergelenk 10 oder alternativ beispielsweise durch im Wesentlichen in einer Flucht liegenden Schultergelenk 7, Handgelenk 9 und Fingergelenk 10 bestimmt werden.In contrast, in 3 an arm position is shown in which the position of three joints, ie the shoulder joint 7, the elbow joint 8 and the wrist joint 9, lie between the two lines 11,12. This arm position is interpreted as an arm gesture and is thus identified as a predetermined gesture for opening or closing the vehicle door 4 as soon as the arm points in the direction of an unlocking lever or a door handle of the vehicle door 4 . Alternatively, the arm gesture can be determined, for example, by the shoulder joint 7, elbow joint 8 and finger joint 10 being essentially aligned, or alternatively by the shoulder joint 7, wrist 9 and finger joint 10 being essentially aligned.

Wird anhand der vorbestimmten Geste erkannt, dass der Insasse 5 beabsichtigt, die Fahrzeugtür 2 zu öffnen oder zu schließen, wird von der Steuereinheit ein Steuersignal erzeugt, welches einer Vorrichtung zum automatischen Öffnen und Schließen der Fahrzeugtür 2 zugeführt wird, so dass die Fahrzeugtür 2 aufgrund automatisch geöffnet wird.If it is recognized from the predetermined gesture that the occupant 5 intends to open or close the vehicle door 2, a control signal is generated by the control unit, which is fed to a device for automatically opening and closing the vehicle door 2, so that the vehicle door 2 is due is opened automatically.

Diese vorbestimmte Geste, d.h. die Armgeste des Insassen 5 in Richtung des Entriegelungshebels 4 ist also eine intuitive und einleuchtende Geste, auf deren Erkennung mit dem automatischen Öffnen und Schließen der Fahrzeugtür 2 reagiert wird.This predetermined gesture, i.e. the arm gesture of the occupant 5 in the direction of the unlocking lever 4, is therefore an intuitive and obvious gesture, the recognition of which is followed by the vehicle door 2 being automatically opened and closed.

Ist die Fahrzeugtür 2 geöffnet und der Insasse 5 befindet sich im Fahrzeug 1, wobei der Insasse 5 eine Armgeste in Richtung der Fahrzeugtür 2, insbesondere des Türgriffes, ausführt, um diese zu schließen, wird diese Armgeste und deren Richtung von der Bilderfassungseinheit 3 erfasst.If the vehicle door 2 is open and the occupant 5 is in the vehicle 1, with the occupant 5 making an arm gesture in the direction of the vehicle door 2, in particular the door handle, in order to close it, this arm gesture and its direction are recorded by the image acquisition unit 3.

Aufgrund der Armgeste des Insassen 5 in Richtung des Türgriffes erzeugt die Steuereinheit ein Steuersignal, mit welchem die Vorrichtung zum automatischen Öffnen und Schließen der Fahrzeugtür 2 angesteuert wird, so dass diese automatisch geschlossen wird.Due to the arm gesture of the occupant 5 in the direction of the door handle, the control unit generates a control signal with which the device for automatically opening and closing the vehicle door 2 is controlled so that it is closed automatically.

Bevorzugt wird die Fahrzeugtür 2 bei erfasster vorbestimmter Geste des Insassen 5 nur automatisch geöffnet und geschlossen, wenn sich im Schwenkbereich der Fahrzeugtür 2 kein Objekt befindet. Dies dient sowohl als Kollisions- als auch als Einklemmschutz.When a predetermined gesture by the occupant 5 is detected, the vehicle door 2 is preferably only opened and closed automatically if there is no object in the pivoting range of the vehicle door 2 . This serves as both collision and anti-pinch protection.

Der Einklemmschutz ist beispielsweise mittels eines Elektromotors realisierbar, wobei der Einklemmschutz und der Kollisionsschutz z. B. auf der Auswertung erfasster Bilddaten der im Fahrzeuginnenraum angeordneten Bilderfassungseinheit 3 und/oder auf erfassten Bilddaten zumindest einer weiteren Bildererfassungseinheit einer Umgebungsüberwachung des Fahrzeuges 1 basieren bzw. basiert.The anti-trap protection can be implemented, for example, by means of an electric motor, with the anti-trap protection and the collision protection z. B. based on the evaluation of captured image data of the image capturing unit 3 arranged in the vehicle interior and/or on captured image data of at least one further image capturing unit of an environmental monitoring system of the vehicle 1 .

Vorzugsweise ist ein Bedienelement im Fahrzeug 1 angeordnet, welches zur Aktivierung und Deaktivierung des automatischen Öffnens und Schließen der Fahrzeugtür 2 in Abhängigkeit der erfassten vorbestimmten des Insassen 5 vorgesehen ist. Somit hat der Insasse 5 die Möglichkeit zu entscheiden, ob er die Fahrzeugtür 2 manuell öffnet und schließt oder dies automatisch durchgeführt wird.An operating element is preferably arranged in the vehicle 1 , which is provided for activating and deactivating the automatic opening and closing of the vehicle door 2 as a function of the detected predetermined values of the occupant 5 . Thus, the occupant 5 has the opportunity to decide whether he opens and closes the vehicle door 2 manually or whether this is done automatically.

Zudem wird die Fahrzeugtür 2 ausschließlich aufgrund der erfassten vorbestimmten Geste des Insassen 5 automatisch geöffnet und geschlossen, wenn sich das Fahrzeug 1 im Stillstand befindet.In addition, the vehicle door 2 is automatically opened and closed exclusively based on the detected predetermined gesture of the occupant 5 when the vehicle 1 is at a standstill.

Alternativ dazu, dass das automatische Öffnen der Fahrzeugtür 2 durch die Armgeste zu dem Entriegelungshebel 4 und das automatische Schließen durch die Armgeste zum Türgriff hin veranlasst wird, kann ein Türbereich vorgegeben sein.As an alternative to the automatic opening of the vehicle door 2 being caused by the arm gesture towards the unlocking lever 4 and the automatic closing being caused by the arm gesture towards the door handle, a door area can be predetermined.

Wird eine Armgeste des Insassen 5 hin zu dem vorgegebenen Türbereich erfasst, wird dann die Fahrzeugtür 2 automatisch geöffnet oder geschlossen.If an arm gesture of the occupant 5 toward the predetermined door area is detected, then the vehicle door 2 is automatically opened or closed.

BezugszeichenlisteReference List

11
Fahrzeugvehicle
22
Fahrzeugtürvehicle door
33
Bilderfassungseinheitimage acquisition unit
44
Entriegelungshebelrelease lever
55
Insasseinmate
66
Arm eines Insasseninmate's arm
77
Schultergelenkshoulder joint
88th
Ellbogengelenkelbow joint
99
Handgelenkwrist
1010
Fingergelenkfinger joint

Claims (6)

Verfahren zum Öffnen und Schließen einer Fahrzeugtür, aufweisend folgende Schritte: -Erfassung von Bilddaten in einem Fahrzeuginnenraum und/oder in einem Schwenkbereich der Fahrzeugtür (2), -Auswerten der Bilddaten, wobei bei Erkennung einer vorbestimmten Geste eines Insassen (5) die Fahrzeugtür (2) geöffnet oder geschlossen wird dadurch gekennzeichnet, dass die vorbestimmte Geste eine zu einem Entriegelungshebel (4) oder einem Türgriff der Fahrzeugtür (2) zeigende Armgeste des lnsassen (5) des Fahrzeugs ist, wobei die Armgeste durch im Wesentlichen in einer Flucht liegende Gelenkpositionen (7, 8, 9, 10) von mindestens drei der Gelenke von Schulter (7), Ellbogen (8), Hand (9) oder Finger (10) des Armes definiert ist und wobei die Fahrzeugtür (2) in Abhängigkeit von aus den Bilddaten bestimmten Körpermaßen eines Insassen (5) geöffnet oder geschlossen wird.Method for opening and closing a vehicle door, having the following steps: - acquisition of image data in a vehicle interior and/or in a pivoting area of the vehicle door (2), - evaluation of the image data, with the vehicle door ( 2) opening or closing is characterized in that the predetermined gesture is an arm gesture of the occupant (5) of the vehicle pointing to a release lever (4) or a door handle of the vehicle door (2), the arm gesture being characterized by substantially aligned joint positions (7, 8, 9, 10) of at least three of the joints of the shoulder (7), elbow (8), hand (9) or finger (10) of the arm is defined and wherein the vehicle door (2) depending on from the Image data specific body dimensions of an occupant (5) is opened or closed. Verfahren nach Anspruch 1 dadurch gekennzeichnet, dass das automatische Öffnen oder Schließen der Fahrzeugtür (2) bei einem Erkennen einer Kollision oder einer bevorstehenden Kollision der Fahrzeugtür (2) mit einem Objekt verhindert oder abgebrochen wird.procedure after claim 1 characterized in that the automatic opening or closing of the vehicle door (2) is prevented or stopped when a collision or an imminent collision of the vehicle door (2) with an object is detected. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass bei Berührung von Umrisslinien des Objektes mit Umrisslinien der Fahrzeugtür (2) eine Kollision detektiert oder bei Annäherung der Umrisslinien des Objektes an die Umrisslinien der Fahrzeugtür (2) bis auf einen vorgebbaren Abstand eine bevorstehende Kollision detektiert wird.procedure after claim 2 , characterized in that when the outlines of the object touch the outlines of the vehicle door (2), a collision is detected or when the outlines of the object approach the outlines of the vehicle door (2) up to a predeterminable distance, an imminent collision is detected. Verfahren nach einem der vorangehenden Ansprüche , dadurch gekennzeichnet, dass ein Öffnen und/oder Schließen der Fahrzeugtür (2) durch eine vorbestimmte Abbruchgeste gestoppt wird.Method according to one of the preceding claims, characterized in that opening and/or closing of the vehicle door (2) is stopped by a predetermined break-off gesture. Verfahren nach Anspruch 4 dadurch gekennzeichnet, dass die vorbestimmte Abbruchgeste eine der Fahrzeugtür (2) zugewandte Handinnenfläche umfasst.procedure after claim 4 characterized in that the predetermined break-off gesture comprises a palm facing the vehicle door (2). Vorrichtung zum Öffnen und Schließen einer Fahrzeugtür eingerichtet zum Durchführen eines Verfahrens nach den Ansprüchen 1 bis 5 mit Aktoren zur Betätigung der Fahrzeugtür (2), mit Mitteln zur Erfassung von Bilddaten in einem Fahrzeuginnenraum und/oder in einem Schwenkbereich der Fahrzeugtür (2), Mittel zur Auswertung der Bilddaten und zur Erkennung einer vorbestimmten Geste eines Insassen (5), dadurch gekennzeichnet, dass bei Erkennung einer vorbestimmten Geste, die eine auf einen Entriegelungshebel (4) oder einen Türgriff der Fahrzeugtür (2) zeigende Armgeste umfasst, eine Ansteuerung der Aktoren erfolgt, wobei ein Öffnen oder Schließen der Fahrzeugtür (2) in Abhängigkeit von aus den Bilddaten bestimmten Körpermaßen eines Insassen (5) erfolgt und wobei die Mittel zur Auswertung der Bilddaten die auf einen Entriegelungshebel oder einen Türgriff der Fahrzeugtür (2) zeigende Armgeste anhand von im Wesentlichen in einer Flucht liegenden Gelenkpositionen (7, 8, 9, 10) von mindestens drei der Gelenke von Schulter (7), Ellbogen (8), Hand (9) oder Finger (10) des Arms des Insassen (5) ermittelt.Device for opening and closing a vehicle door set up to carry out a method according to claims 1 until 5 with actuators for actuating the vehicle door (2), with means for capturing image data in a vehicle interior and/or in a pivoting area of the vehicle door (2), means for evaluating the image data and for recognizing a predetermined gesture of an occupant (5), characterized that upon recognition of a predetermined gesture, which includes an arm gesture pointing to an unlocking lever (4) or a door handle of the vehicle door (2), the actuators are actuated, with the vehicle door (2) being opened or closed depending on from the image data certain body dimensions of an occupant (5) and wherein the means for evaluating the image data detect the arm gesture pointing to an unlocking lever or a door handle of the vehicle door (2) using joint positions (7, 8, 9, 10) that are essentially in line with one another of at least three of the shoulder (7), elbow (8), hand (9) or finger (10) joints of the occupant's (5) arm are detected.
DE102017000461.7A 2016-02-26 2017-01-19 Method for opening and closing a vehicle door Active DE102017000461B4 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102016002368.6A DE102016002368A1 (en) 2016-02-26 2016-02-26 Method for opening and closing a vehicle door of a vehicle
DE102016002368.6 2016-02-26

Publications (2)

Publication Number Publication Date
DE102017000461A1 DE102017000461A1 (en) 2017-08-31
DE102017000461B4 true DE102017000461B4 (en) 2023-03-30

Family

ID=56853350

Family Applications (2)

Application Number Title Priority Date Filing Date
DE102016002368.6A Withdrawn DE102016002368A1 (en) 2016-02-26 2016-02-26 Method for opening and closing a vehicle door of a vehicle
DE102017000461.7A Active DE102017000461B4 (en) 2016-02-26 2017-01-19 Method for opening and closing a vehicle door

Family Applications Before (1)

Application Number Title Priority Date Filing Date
DE102016002368.6A Withdrawn DE102016002368A1 (en) 2016-02-26 2016-02-26 Method for opening and closing a vehicle door of a vehicle

Country Status (1)

Country Link
DE (2) DE102016002368A1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110271512B (en) * 2018-03-13 2021-05-14 比亚迪半导体股份有限公司 Vehicle door control method and device, storage medium, vehicle door and vehicle
US20200300027A1 (en) * 2019-03-21 2020-09-24 Ford Global Technologies, Llc Automated door control system and convenience features
JP7436230B2 (en) * 2020-02-12 2024-02-21 トヨタ自動車株式会社 vehicle ramp system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013010932A1 (en) 2013-06-29 2014-12-31 Audi Ag Method for operating a user interface, user interface and motor vehicle with a user interface
DE102014008430A1 (en) 2014-06-06 2015-12-17 Man Truck & Bus Ag Method for the contactless opening of an access and / or exit on a vehicle
WO2016008987A1 (en) 2014-07-17 2016-01-21 Bayerische Motoren Werke Aktiengesellschaft Method and controller for opening a closed motor vehicle pivoting door which opens to the side from the inside
DE102013013226B4 (en) 2013-08-08 2018-04-26 Audi Ag Motor vehicle with a detection of an exit intention

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013010932A1 (en) 2013-06-29 2014-12-31 Audi Ag Method for operating a user interface, user interface and motor vehicle with a user interface
DE102013013226B4 (en) 2013-08-08 2018-04-26 Audi Ag Motor vehicle with a detection of an exit intention
DE102014008430A1 (en) 2014-06-06 2015-12-17 Man Truck & Bus Ag Method for the contactless opening of an access and / or exit on a vehicle
WO2016008987A1 (en) 2014-07-17 2016-01-21 Bayerische Motoren Werke Aktiengesellschaft Method and controller for opening a closed motor vehicle pivoting door which opens to the side from the inside

Also Published As

Publication number Publication date
DE102017000461A1 (en) 2017-08-31
DE102016002368A1 (en) 2016-09-22

Similar Documents

Publication Publication Date Title
DE102014220042B4 (en) Access system for a vehicle
EP2835287B1 (en) Method for automatically actuating a closing element of a vehicle, and corresponding device and vehicle
EP2664501B1 (en) Method and device for automatically actuating a locking element of a vehicle
EP2437962B1 (en) Method and system for controlling the opening and closing of a door or trunk of a vehicle
EP1902912B1 (en) Motor vehicle with a sensor assembly
DE102017000461B4 (en) Method for opening and closing a vehicle door
DE102007062472A1 (en) Translatory or rotatory opening door or flap, particularly vehicle door, comprises one actuator which is assigned for motor support of opening or closing movement or unlocking operation or locking operation
DE102013010994A1 (en) Adjustment method and adjusting device for a vehicle door
WO2016180582A1 (en) Actuation of a locking element for a vehicle using an ultrasound sensor
DE102011119579A1 (en) Device for electromotive actuation of a door
DE102015214793A1 (en) Operating device for a motor-adjustable side door of a vehicle
DE102012012729A1 (en) Operating device for motor vehicle, comprises adjusting unit and control unit, which controls adjusting unit, such that display is moved from rest position into gripping position when operating intention of user is detected
DE102011013766A1 (en) Device for detecting object e.g. person in swiveling range of side door of vehicle, has back driving camera that is arranged swiveling range of side door to capture image of object seized in swiveling range of side door
DE102014012193A1 (en) Non-contact vehicle operation
DE112020000851T5 (en) HANDLELESS DOOR FOR A VEHICLE
EP3192955B1 (en) Method for opening and/or closing a door or flap of a motor vehicle
DE212020000522U1 (en) Handleless door for a vehicle
DE102016010932A1 (en) Method for operating a protective device
WO2023006261A1 (en) Method for automatically controlling an electrically operated window in a motor vehicle
WO2017194680A1 (en) Apparatus for operating a lid
EP3219894B1 (en) Method and device for controlling the movement of a door of a vehicle and vehicle
DE102019210912A1 (en) Adjustment device and method for the external force-operated adjustment of an adjustment part on a vehicle on the basis of at least one operating event
DE102007035803A1 (en) Vehicle comprises actuator and control system with one or more systems for managing the opening and closing of the car doors
WO2023031088A1 (en) Method for operating a flap assembly of a motor vehicle
DE102022131082A1 (en) Method for operating an object detection system of a vehicle, as well as object detection system and motor vehicle

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: E05F0015700000

Ipc: E05F0015730000

R016 Response to examination communication
R081 Change of applicant/patentee

Owner name: MERCEDES-BENZ GROUP AG, DE

Free format text: FORMER OWNER: DAIMLER AG, 70327 STUTTGART, DE

Owner name: DAIMLER AG, DE

Free format text: FORMER OWNER: DAIMLER AG, 70327 STUTTGART, DE

R081 Change of applicant/patentee

Owner name: MERCEDES-BENZ GROUP AG, DE

Free format text: FORMER OWNER: DAIMLER AG, STUTTGART, DE

R018 Grant decision by examination section/examining division
R020 Patent grant now final