DE102020123048B4

DE102020123048B4 - ARRANGEMENT AND PROCEDURE FOR OPTICAL DETECTION OF A PERSON TO BE CHECKED

Info

Publication number: DE102020123048B4
Application number: DE102020123048.6A
Authority: DE
Inventors: Andreas Wolf; Maxim Schnjakin
Original assignee: Bundesdruckerei GmbH
Current assignee: Bundesdruckerei GmbH
Priority date: 2020-09-03
Filing date: 2020-09-03
Publication date: 2022-07-28
Anticipated expiration: 2040-09-04
Also published as: DE102020123048A1

Abstract

Anordnung (100) zur optischen Erfassung einer zu überprüfenden Person (200) an einer Kontrollstation (104),
mit einer der Kontrollstation (104) zugeordneten Kamera (102),
mit einer der Kontrollstation (104) zugeordneten Prozessoreinheit (106), die ausgebildet ist, mit der der Kontrollstation (104) zugeordneten Kamera (102) über eine Kommunikationsverbindung zu kommunizieren, wobei die Prozessoreinheit (106) eine Auswerteeinheit (108) aufweist, welche ausgebildet ist, Daten, die mittels der der Kontrollstation (104) zugeordneten Kamera (102) von der zu überprüfenden Person (200) erfasst werden, weiterzuverarbeiten und anschließend ein sich daraus ergebendes Verarbeitungsergebnis an eine Ausgabeeinheit (110) zu übermitteln, welche hierzu ausgebildet ist, mit der Prozessoreinheit (106) ebenfalls über eine Kommunikationsverbindung zu kommunizieren,
wobei die Prozessoreinheit (106) ausgebildet ist, eine Kommunikationsverbindung mit einem mobilen Endgerät (112) aufzubauen und Daten, die von einer Kamera (116) des mobilen Endgeräts (112) von der zu überprüfenden Person (200) erfasst werden, der Auswerteeinheit (108) zuzuführen, dadurch gekennzeichnet, dass die Auswerteeinheit (108) ausgebildet ist, auch die von der Kamera (116) des mobilen Endgeräts (112) erfassten Daten in die Weiterverarbeitung und damit in das Verarbeitungsergebnis einzubeziehen, bevor es an die Ausgabeeinheit (110) übermittelt und von der Ausgabeeinheit (110) ausgegeben wird, dass das mobile Endgerät (112, 114) wenigstens einen Sensor zur Lagebestimmung der Kamera (116, 118) umfasst, und dass die Prozessoreinheit (106) ausgebildet ist, auch die Daten der Lage der Kamera (116, 118) der Auswerteeinheit (108) zuzuführen, welche ihrerseits ausgebildet ist, die Lage der Kamera (116, 118) in die Weiterverarbeitung und damit in das Verarbeitungsergebnis einzubeziehen, bevor es an die Ausgabeeinheit (110) übermittelt und von der Ausgabeeinheit (110) ausgegeben wird.

Arrangement (100) for the optical detection of a person (200) to be checked at a control station (104),
with a camera (102) assigned to the control station (104),
with a processor unit (106) assigned to the control station (104), which is designed to communicate with the camera (102) assigned to the control station (104) via a communication link, the processor unit (106) having an evaluation unit (108) which is designed is to further process data recorded by the person (200) to be checked by means of the camera (102) assigned to the control station (104) and then to transmit a resulting processing result to an output unit (110) which is designed for this purpose, communicate with the processor unit (106) also via a communication link,
wherein the processor unit (106) is designed to set up a communication connection with a mobile terminal device (112) and data that is captured by a camera (116) of the mobile terminal device (112) from the person to be checked (200) to the evaluation unit (108 ) to be supplied, characterized in that the evaluation unit (108) is designed to also include the data captured by the camera (116) of the mobile terminal device (112) in the further processing and thus in the processing result before it is transmitted to the output unit (110). and the output unit (110) outputs that the mobile terminal device (112, 114) includes at least one sensor for determining the position of the camera (116, 118), and that the processor unit (106) is designed to also read the data on the position of the camera (116, 118) to the evaluation unit (108), which in turn is designed to include the position of the camera (116, 118) in the further processing and thus in the processing result, before it is transmitted to the output unit (110) and output by the output unit (110).

Description

Die Erfindung betrifft eine Anordnung zur optischen Erfassung einer zu überprüfenden Person an einer Kontrollstation, mit einer der Kontrollstation zugeordneten, insbesondere fest installierten, Kamera. Der Kontrollstation ist ferner eine Prozessoreinheit zugeordnet, die ausgebildet ist, mit der der Kontrollstation zugeordneten Kamera über eine Kommunikationsverbindung zu kommunizieren, wobei die Prozessoreinheit eine Auswerteeinheit aufweist, welche ausgebildet ist, Daten, die mittels der der Kontrollstation zugeordneten Kamera von der zu überprüfenden Person erfasst werden, weiterzuverarbeiten und anschließend ein sich daraus ergebendes Verarbeitungsergebnis an eine Ausgabeeinheit zu übermitteln, welche ihrerseits dazu ausgebildet ist, mit der Prozessoreinheit über eine Kommunikationsverbindung zu kommunizieren. Die Erfindung betrifft außerdem ein Verfahren zur optischen Erfassung einer zu überprüfenden Person an einer Kontrollstation.The invention relates to an arrangement for the optical detection of a person to be checked at a control station, with a camera assigned to the control station, in particular a permanently installed camera. The control station is also assigned a processor unit which is designed to communicate with the camera assigned to the control station via a communication link, the processor unit having an evaluation unit which is designed to record data from the person to be checked using the camera assigned to the control station be further processed and then to transmit a processing result resulting therefrom to an output unit, which in turn is designed to communicate with the processor unit via a communication link. The invention also relates to a method for the optical detection of a person to be checked at a control station.

Derartige Anordnungen sind aus dem Stand der Technik bekannt und werden meist als Zutrittskontrollsystem in einem Außenbereich eingesetzt. Aufgrund der unterschiedlichen Umgebungsbedingungen ist die Datenqualität teilweise eingeschränkt, insbesondere in solchen Situationen, in denen die Sonne zu stark scheint und dadurch zu einer Überbelichtung führt oder in Situationen, in denen der Lichteinfall auf die zu überprüfende Person ungünstig ist und unerwünschte Schatten hervorruft. Aus diesem Grund besteht das Bedürfnis, mehrere Kameras für die optische Erfassung einer zu überprüfenden Person, insbesondere zur optischen Erfassung eines Gesichtsbilds der Person, zu verwenden, wobei aufgrund der örtlichen Gegebenheiten nicht immer Platz für weitere fest installierte Kameras vorliegt. Außerdem kann es vorkommen, dass sich in einem Zugangskontrollbereich oder in einer Kontrollzone mehrere Personen befinden, sodass auch dadurch die optische Erfassung und die Identifizierung einer einzelnen zu überprüfenden Person in der Menschenmenge erschwert ist, beispielsweise wenn die zu überprüfende Person von einer anderen Person in der Menschenmenge innerhalb der Kontrollzone (teilweise) verdeckt wird.Such arrangements are known from the prior art and are mostly used as an access control system in an outdoor area. Due to the different environmental conditions, the data quality is partially limited, especially in situations where the sun is shining too brightly, leading to overexposure, or in situations where the incidence of light on the person to be checked is unfavorable and causes unwanted shadows. For this reason, there is a need to use multiple cameras for optically capturing a person to be checked, in particular for optically capturing a face image of the person, with local conditions not always providing space for further permanently installed cameras. It can also happen that there are several people in an access control area or in a control zone, so that the optical detection and identification of a single person to be checked in the crowd is made more difficult, for example if the person to be checked is separated from another person in the crowd crowd within the control zone is (partially) covered.

In der DE 10 2014 225 592 A1 wird eine Kontrollstation beschrieben, die aus einer Kontrollvorrichtung und einer Mehrzahl von Nachkontrollvorrichtungen besteht. Hierbei ist eine Vorab-Kontrollvorrichtung vorhanden, bei der die zu überprüfende Person durchleuchtet und/oder optisch erfasst wird. Hierbei kann eine Bilderfassungseinheit zur Erfassung des Gesichts der Person Einsatz finden. Als Bilderfassungseinheit wird wenigstens eine Kamera verwendet. Eine der Kameras ist in die Kontrollvorrichtung selbst integriert. Alternativ oder zusätzlich kann als Bilderfassungseinrichtung eine mobile Kamera verwendet werden. Alle Daten können an einen Datenserver übertragen werden, der seine Daten wiederum den Nachkontrollvorrichtungen zur Verfügung stellt.In the DE 10 2014 225 592 A1 describes a control station consisting of a control device and a plurality of post-control devices. In this case, there is a preliminary control device in which the person to be checked is x-rayed and/or optically recorded. An image capture unit for capturing the face of the person can be used here. At least one camera is used as the image acquisition unit. One of the cameras is integrated into the control device itself. Alternatively or additionally, a mobile camera can be used as an image acquisition device. All data can be transmitted to a data server, which in turn makes its data available to the post-control devices.

Es ist daher die Aufgabe der vorliegenden Erfindung, eine Anordnung und ein Verfahren zur optischen Erfassung einer zu überprüfenden Person derart weiterzubilden, die eine noch zuverlässige optische Erfassung bei den unterschiedlichsten Umgebungsbedingungen bieten.It is therefore the object of the present invention to further develop an arrangement and a method for the optical detection of a person to be checked in such a way that offers an even more reliable optical detection under the most varied of environmental conditions.

Diese Aufgabe wird durch eine Anordnung mit den Merkmalen des Anspruchs 1 und durch ein Verfahren mit den Merkmalen des Anspruchs 5 gelöst. Vorteilhafte Ausgestaltungen mit zweckmäßigen Weiterbildungen sind in den abhängigen Ansprüchen angegeben.This object is achieved by an arrangement with the features of claim 1 and by a method with the features of claim 5. Advantageous configurations with expedient developments are specified in the dependent claims.

Die Anordnung zur optischen Erfassung einer zu überprüfenden Person, insbesondere zur optischen Erfassung des Gesichts der zu überprüfenden Person, zeichnet sich dadurch aus, dass die Prozessoreinheit ausgebildet ist, eine Kommunikationsverbindung mit einem mobilen Endgerät aufzubauen und Daten, die von einer Kamera des mobilen Endgeräts von der zu überprüfenden Person erfasst werden, der Auswerteeinheit zuzuführen, die ausgebildet ist, auch die von der Kamera des mobilen Endgeräts erfassten Daten in die Weiterverarbeitung und damit in das Verarbeitungsergebnis einzubeziehen, bevor es an die Ausgabeeinheit übermittelt und von der Ausgabeeinheit ausgegeben wird.The arrangement for the optical detection of a person to be checked, in particular for the optical detection of the face of the person to be checked, is characterized in that the processor unit is designed to establish a communication link with a mobile terminal and data from a camera of the mobile terminal of the person to be checked is fed to the evaluation unit, which is designed to also include the data captured by the camera of the mobile terminal in the further processing and thus in the processing result before it is transmitted to the output unit and output by the output unit.

Damit ist der Vorteil verbunden, dass eine weitere Kamera eines mobilen Endgeräts dazu genutzt wird, um die optischen Erfassung der zu überprüfenden Person durchzuführen, die typischerweise dann aus einem weiteren Blickwinkel gegenüber der der Kontrollstation zugeordneten Kamera erfolgt. Auf diese Weise kann die zu überprüfende Person sich zunächst geeignet „ins Licht“ stellen, eine oder mehrere Aufnahmen, beispielsweise des Gesichts, erfassen und der Kontrollstation, insbesondere der Prozessoreinheit über eine geeignete Schnittstelle zur Verfügung stellen. Über diese Schnittstelle können diese Daten dann von der Auswerteeinheit - zusammen mit den Daten der der Kontrollstation zugeordneten Kamera - weiterverarbeitet werden, womit für die Überprüfung der zu überprüfenden Person eine verbesserte Datenlage vorliegt und deshalb zu einem präziseren Kontrollergebnis führt.This has the advantage that another camera of a mobile terminal device is used to optically record the person to be checked, which typically then takes place from a wider angle compared to the camera assigned to the control station. In this way, the person to be checked can first position themselves appropriately “into the light”, capture one or more recordings, for example of the face, and make them available to the control station, in particular the processor unit, via a suitable interface. This data can then be further processed by the evaluation unit via this interface, together with the data from the camera assigned to the control station, which improves the data situation for checking the person to be checked and therefore leads to a more precise control result.

Als mobiles Endgerät kommt typischerweise ein Smartphone in Betracht, das von der zu überprüfenden Person oder von einer weiteren Person mitgeführt wird. Ein Smartphone verfügt typischerweise über geeignete Kommunikationsschnittstellen und ermöglicht damit einen zuverlässigen Datenaustausch zwischen dem mobilen Endgerät und der Prozessoreinheit. Die Datenübertragung erfolgt dabei vorzugsweise drahtlos, kann aber auch drahtgebunden erfolgen.A smartphone, which is carried by the person to be checked or by another person, typically comes into consideration as a mobile terminal device. A smartphone typically has suitable communication interfaces and thus enables reliable data exchange between the mobile terminal device and the processor unit. The data is preferably transmitted wirelessly, but can also be wired.

Es ist in diesem Zuge von Vorteil, wenn die Prozessoreinheit ausgebildet ist, eine Kommunikationsverbindung mit wenigstens einem zweiten mobilen Endgerät aufzubauen und Daten, die von einer Kamera des zweiten mobilen Endgeräts von der zu überprüfenden Person erfasst werden, der Auswerteeinheit ebenfalls zuzuführen, die ihrerseits ausgebildet ist, auch die von der Kamera des zweiten mobilen Endgeräts erfassten Daten in die Weiterverarbeitung und damit in das Verarbeitungsergebnis einzubeziehen, bevor es an die Ausgabeeinheit übermittelt und von der Ausgabeeinheit ausgegeben wird. Auf diese Weise ist es also möglich, dass insgesamt wenigstens drei Kameras zur optischen Erfassung der zu überprüfenden Person, insbesondere zur optischen Erfassung des Gesichts der zu überprüfenden Person, genutzt werden können und somit die Daten von wenigstens drei Kameras bei der Weiterverarbeitung durch die Auswerteeinheit berücksichtigt werden. Dies dient ebenfalls einer verbesserten Datenlage, die zu einem verbesserten Prüfergebnis führt.In this context, it is advantageous if the processor unit is designed to set up a communication connection with at least one second mobile terminal device and to also feed data that is captured by a camera of the second mobile terminal device from the person to be checked to the evaluation unit, which in turn is designed is to also include the data captured by the camera of the second mobile terminal in the further processing and thus in the processing result before it is transmitted to the output unit and output by the output unit. In this way it is therefore possible that a total of at least three cameras can be used for optically capturing the person to be checked, in particular for optically capturing the face of the person to be checked, and thus the data from at least three cameras can be taken into account during further processing by the evaluation unit will. This also serves to improve the data situation, which leads to an improved test result.

Eine Ausgestaltung mit wenigstens drei Kameras berücksichtigt zum Beispiel auch den Fall, in welchem Personen mit ihren Smartphones ohnehin sehr viele Fotos einer Szene, insbesondere in einer Kontrollzone, erstellen, sodass eine sich auf dem Bild befindliche zu überprüfende Person aus einer Mehrzahl von Personen identifiziert und somit bei der Auswertung und Weiterverarbeitung durch die Auswerteeinheit überprüft werden kann. Selbstverständlich kann auch eine Serie von Bildern bei der Auswertung herangezogen werden oder vorliegen, so dass die Möglichkeit besteht, dass der Prozessoreinheit der Kontrollstation ein „Stream“ oder ein Film ausgehend vom mobilen Endgerät übermittelt wird, womit eine noch präzisere optische Erfassung der zu überprüfenden Person gegeben ist.An embodiment with at least three cameras also takes into account, for example, the case in which people use their smartphones to take a large number of photos of a scene, in particular in a control zone, so that a person to be checked in the picture is identified from a plurality of people and can thus be checked during the evaluation and further processing by the evaluation unit. Of course, a series of images can also be used or available for the evaluation, so that there is the possibility of a "stream" or a film being transmitted to the processor unit of the control station from the mobile terminal device, which means that the person to be checked can be optically recorded even more precisely given is.

Erfindungsgemäß ist vorgesehen, dass das mobile Endgerät wenigstens einen Sensor zur Lagebestimmung der Kamera umfasst, und wenn die Prozessoreinheit ausgebildet ist, auch die Daten der Lage der Kamera der Auswerteeinheit zuzuführen, welche ihrerseits ausgebildet ist, die Lage der Kamera in die Weiterverarbeitung und damit in das Verarbeitungsergebnis einzubeziehen, bevor es an die Ausgabeeinheit übermittelt und von der Ausgabeeinheit ausgegeben wird. Auf diese Weise kann ein Abgleich mit weiteren Informationen aus den der Prozessoreinheit zugeführten Bilddaten erfolgen. Dieser Abgleich kann eine Konsistenzprüfung dahingehend umfassen, ob der Lichteinfall, ob die Blickrichtung, ob die Position oder andere Informationen in den aus unterschiedlichen Richtungen aufgezeichneten Bildern in sich konsistent und damit plausibel sind. Sollte eine solche Plausibilitätsprüfung negativ ausfallen, so wäre auf einen Täuschungsversuch zu schließen.According to the invention, it is provided that the mobile end device comprises at least one sensor for determining the position of the camera, and if the processor unit is designed to also supply the data on the position of the camera to the evaluation unit, which in turn is designed to include the position of the camera in further processing and thus in to include the processing result before it is sent to the output unit and output by the output unit. In this way, a comparison can be made with further information from the image data supplied to the processor unit. This comparison can include a consistency check to determine whether the incidence of light, whether the viewing direction, whether the position or other information in the images recorded from different directions are inherently consistent and therefore plausible. Should such a plausibility check turn out to be negative, it would be possible to conclude that there was an attempt at deception.

Es hat sich als vorteilhaft erwiesen, wenn aus den Bildern, insbesondere aus den Gesichtsbildern, biometrische Daten extrahiert oder ausgelesen werden, und wenn diese Daten mit Referenzdaten, welche beispielsweise ebenfalls optisch mit einer der Kameras eingelesen wurden, verglichen werden. Werden Abweichungen in wenigstens einem biometrischen Merkmal festgestellt, so wäre ebenfalls auf einen Täuschungsversuch zu schließen.It has proven to be advantageous if biometric data is extracted or read from the images, in particular from the facial images, and if this data is compared with reference data which, for example, were also read in optically with one of the cameras. If discrepancies are found in at least one biometric feature, this would also indicate an attempt at deception.

Eine ergänzende - nicht optische - biometrische Überprüfung der Fingerabdrücke trägt ebenfalls zur Identifikation einer zu überprüfenden Person bei, wobei es von Vorteil ist, wenn das mobile Endgerät wenigstens einen Fingerabdrucksensor zur Erfassung von wenigstens einem der Fingerabdrücke der zu überprüfenden Person umfasst. In diesem Fall ist die Prozessoreinheit ausgebildet, auch die Fingerabdruckdaten der Auswerteeinheit zuzuführen, welche ihrerseits ausgebildet ist, die Fingerabdrücke der zu überprüfenden Person in die Weiterverarbeitung und damit in das Verarbeitungsergebnis einzubeziehen, bevor es an die Ausgabeeinheit übermittelt und von der Ausgabeeinheit ausgegeben wird.An additional - non-optical - biometric check of the fingerprints also contributes to the identification of a person to be checked, it being advantageous if the mobile terminal comprises at least one fingerprint sensor for detecting at least one of the fingerprints of the person to be checked. In this case, the processor unit is designed to also feed the fingerprint data to the evaluation unit, which in turn is designed to include the fingerprints of the person to be checked in the further processing and thus in the processing result before it is transmitted to the output unit and output by the output unit.

Für die Identifizierung oder für die Zugangskontrolle von einer zu überprüfenden Person ist es von Vorteil, wenn die Prozessoreinheit über Zugriff auf einen eine Datenbank umfassenden Speicher verfügt, und wenn die Auswerteeinheit ausgebildet ist, die erfassten Daten mit in der Datenbank gespeicherten Referenzdaten zu vergleichen und das Vergleichsergebnis als Verarbeitungsergebnis an die Ausgabeeinheit zu übermitteln. Über die Ausgabeeinheit kann beispielsweise ein optisches oder akustisches Signal oder eine Information ausgegeben werden, ob es sich bei der zu überprüfenden Person um diejenige Person handelt, die das Kontrollsystem erwartet oder etwa nicht erwartet.For the identification or for access control of a person to be checked, it is advantageous if the processor unit has access to a memory containing a database, and if the evaluation unit is designed to compare the recorded data with reference data stored in the database and that To transmit comparison result as a processing result to the output unit. For example, an optical or acoustic signal or information can be output via the output unit as to whether the person to be checked is the person who is expecting or not expecting the control system.

Das Verfahren zur optischen Erfassung einer zu überprüfenden Person an einer Kontrollstation mit einer vorstehend erwähnten Anordnung umfasst insbesondere die folgenden Schritte:

- optisches Erfassen der zu überprüfenden Person, insbesondere des Gesichts der zu überprüfenden Person, mittels einer der Kontrollstation zugeordneten, insbesondere fest installierten, Kamera,
- optisches Erfassen der zu überprüfenden Person, insbesondere deren Gesichts, mittels einer Kamera eines mobilen Endgeräts,
- Übertragen der Daten, die mittels der der Kontrollstation zugeordneten Kamera und mittels der Kamera des mobilen Endgeräts erfasst wurden, an eine der Kontrollstation zugeordnete Prozessoreinheit,
- Weiterverarbeiten der erfassten Daten durch eine Auswerteeinheit der Prozessoreinheit zu einem Verarbeitungsergebnis, und
- Übertragen des Verarbeitungsergebnisses an eine in Kommunikationsverbindung mit der Prozessoreinheit stehende Ausgabeeinheit, durch welche das Verarbeitungsergebnis ausgegeben wird.

The method for the optical detection of a person to be checked at a control station with an above-mentioned arrangement comprises in particular the following steps:

- Optical detection of the person to be checked, in particular the face of the person to be checked, by means of a camera assigned to the control station, in particular a permanently installed camera,
- Optical detection of the person to be checked, in particular their face, using a camera on a mobile device,
- transmission of the data recorded by means of the camera assigned to the control station and by means of the camera of the mobile terminal device to a processor unit assigned to the control station,
- Further processing of the recorded data by an evaluation unit of the processor unit to produce a processing result, and
- Transmission of the processing result to an output unit which is in communication with the processor unit and through which the processing result is output.

Auf diese Weise kann also eine Zutrittskontrolle mit einer der Kontrollstation zugeordneten Kamera erfolgen, wobei die Bilder der Kamera der Zugriffskontrolle ergänzt werden durch die Bilder eines mobilen Endgeräts, insbesondere einer Smartphone-Kamera eines Smartphones der zu überprüfenden Person. Die zu überprüfende Person tritt in dieser Situation an die Zugriffskontrolle heran und blickt in die Kamera eines mobilen Endgeräts, wobei die Ausrichtung derart optimiert wird, dass ein Lichteinfall der Sonne bei der optischen Erfassung möglichst wenig stört. Der erfasste Videostrom wird dann an die Prozessoreinheit der Kontrollstation übertragen und wird einer Auswerteeinheit zugeführt. Diese führt eine Überprüfung der zu überprüfenden Person anhand der Daten des mobilen Endgeräts und anhand der Daten der der Kontrollstation zugeordneten Kamera durch, wobei das Verarbeitungsergebnis aller Daten mit der Ausgabeeinheit ausgegeben wird.In this way, access control can be carried out using a camera assigned to the control station, with the images from the access control camera being supplemented by the images from a mobile terminal device, in particular a smartphone camera of a smartphone, of the person to be checked. In this situation, the person to be checked approaches the access control and looks into the camera of a mobile terminal device, with the alignment being optimized in such a way that incident light from the sun interferes as little as possible with the optical detection. The captured video stream is then transmitted to the processor unit of the control station and is fed to an evaluation unit. This checks the person to be checked using the data from the mobile terminal device and using the data from the camera assigned to the control station, with the processing result of all data being output with the output unit.

Es besteht auch die Möglichkeit, eine Gruppen-Zutrittskontrolle, beispielsweise vor einem Fußballstadion, durchzuführen, wobei mehrere Mitglieder der Gruppe über ein eigenes mobiles Endgerät, insbesondere über ein Smartphone, verfügen. In diesem Zuge ist es von Vorteil, wenn die zu überprüfende Person zusätzlich mit einer Kamera von wenigstens einem zweiten mobilen Endgerät optisch erfasst wird, und wenn die Daten der Kamera des zweiten mobilen Endgeräts ebenfalls an die Prozessoreinheit übertragen, durch die Auswerteeinheit weiterverarbeitet und damit im Verarbeitungsergebnis berücksichtigt werden.There is also the possibility of carrying out a group access control, for example in front of a football stadium, with several members of the group having their own mobile terminal device, in particular a smartphone. In this context, it is advantageous if the person to be checked is also optically recorded with a camera of at least one second mobile terminal device, and if the data from the camera of the second mobile terminal device is also transmitted to the processor unit, processed further by the evaluation unit and thus in the Processing result are taken into account.

Der Vorteil in dieser Ausgestaltung besteht darin, dass die Überprüfung verbessert wird, weil aufgrund des Einsatzes von vielen Kameras mehr Bilddaten zu einer zu überprüfenden Person vorliegen. Außerdem kann auf diese Weise eine Vielzahl von Personen gleichzeitig überprüft werden, weil sich auf den einzelnen optisch erfassten Bildern der mobilen Endgeräte zumeist mehr als eine Person befindet. The advantage of this refinement is that the check is improved because more image data on a person to be checked is available due to the use of many cameras. In addition, a large number of people can be checked at the same time in this way, because there is usually more than one person on the individual optically recorded images of the mobile terminals.

Aus diesem Grund können auch insgesamt weniger Bilder ausreichen als mobile Endgeräte vorhanden sind, um eine gute Überprüfung einer Mehrzahl von zu überprüfenden Personen durchzuführen. Vorzugsweise werden dabei die Gesichter der Gruppenmitglieder erfasst und mit Referenzdaten verglichen.For this reason, a total of fewer images than there are mobile terminals can be sufficient to carry out a good check on a large number of people to be checked. The faces of the group members are preferably recorded and compared with reference data.

Es ist von Vorteil, wenn die gegenseitige Lage der Kameras anhand der Daten eines GPS-Sensors des mobilen Endgeräts bestimmt und anschließend einer Plausibilitätsprüfung unterzogen wird. Auf diese Weise lässt sich ein zeitlicher und räumlicher Zusammenhang, insbesondere auch aus dem Zeitstempel der von den Kameras erzeugten Einzelbilder herstellen. Sollten sich hierbei Abweichungen ergeben, so fällt die Plausibilitätsprüfung negativ aus und lässt auf einen Täuschungsversuch an der Kontrollstation schließen.It is advantageous if the mutual position of the cameras is determined using data from a GPS sensor on the mobile device and then subjected to a plausibility check. In this way, a temporal and spatial connection can be established, in particular also from the time stamp of the individual images generated by the cameras. If there are any discrepancies, the plausibility check is negative and suggests an attempt at deception at the control station.

Bei der Aufzeichnung von Gruppen, hat es sich als vorteilhaft erwiesen, wenn eine einzelne zu überprüfende Person in einer Menge von mehreren Personen auf den Bildern identifiziert wird. Anhand der von den einzelnen mobilen Endgeräten übermittelten Daten, kann eine Standortprüfung der zu überprüfenden Person auf den mehreren Bildern durchgeführt und dieser ebenfalls einer Plausibilitätsprüfung unterzogen werden. Ferner kann eine Lichteinfallsprüfung des Lichteinfalls der zu überprüfenden Person durchgeführt und auf eine vorliegende Plausibilität geprüft werden. Zusätzlich kann die Ausrichtung, insbesondere die Ausrichtung des Kopfes, der zu überprüfenden Person auf einer Mehrzahl von Bildern erfasst werden, wobei eine vorgegebene Pose als „Normgröße“ bei der Überprüfung herangezogen wird.When recording groups, it has proven to be advantageous if a single person to be checked is identified in a crowd of several people on the images. Based on the data transmitted by the individual mobile terminals, a location check of the person to be checked can be carried out on the multiple images and this can also be subjected to a plausibility check. Furthermore, a light incidence check of the light incidence of the person to be checked can be carried out and checked for plausibility. In addition, the alignment, in particular the alignment of the head, of the person to be checked can be recorded on a plurality of images, with a specified pose being used as the “standard size” during the check.

Für die Plausibilitätsprüfung oder bei einer Zutrittskontrolle hat es sich als sinnvoll erwiesen, wenn die von der Prozessoreinheit empfangenen Daten mittels der Auswerteeinheit mit Referenzdaten verglichen werden, die in einer in einem Speicher hinterlegten Datenbank gespeichert sind, und wenn das Vergleichsergebnis als Verarbeitungsergebnis an die Ausgabeeinheit übermittelt wird.For the plausibility check or for access control, it has proven useful if the data received from the processor unit is compared by the evaluation unit with reference data that is stored in a database stored in a memory, and if the comparison result is transmitted to the output unit as the processing result becomes.

Dabei können auch die an den mobilen Endgeräten vorhandenen Fingerabdrucksensoren dazu genutzt werden, um eine weitergehende biometrische Erfassung der Fingerabdruckdaten der zu überprüfenden Person durchzuführen, wobei der mindestens eine erfasste Fingerabdruck mit in einer Datenbank der Prozessoreinheit hinterlegten Fingerabdrücken abgeglichen wird, welche in Korrelation zu weiteren personenbezogenen Daten stehen. Bei Übereinstimmung des erfassten Fingerabdrucks mit einem der in der Datenbank hinterlegten Fingerabdrücke, können die zugehörigen personenbezogenen Daten an der Ausgabeeinheit ebenfalls ausgegeben werden.The fingerprint sensors on the mobile end devices can also be used to perform further biometric capture of the fingerprint data of the person to be checked, with the at least one captured fingerprint being compared with fingerprints stored in a database of the processor unit, which correlate with other personal data data stand. If the recorded fingerprint matches one of the fingerprints stored in the database, the associated personal Data are also output at the output unit.

Die Mehrzahl an optisch erfassten Bildern der zu überprüfenden Person, insbesondere des Gesichts der zu überprüfenden Person, ermöglicht es zudem, dass anhand der Daten der der Kontrollstation zugeordneten Kamera und anhand der Daten der Kamera des mobilen Endgeräts ein dreidimensionales Gesichtsbild der zu überprüfenden Person erstellt und einer weitergehenden Überprüfung unterzogen wird. Die weitergehende Überprüfung kann beispielsweise ein Abgleich mit den Daten in der Datenbank sein. Auf diese Weise kann eine PAD („presentation attack detection“) durchgeführt werden, da nun geprüft werden kann, ob es sich bei dem Bild um einen dreidimensionalen Kopf einer zu überprüfenden Person handelt und nicht lediglich um eine Fotografie oder ein Abbild. Auch hierbei lassen sich die zeitlichen und/oder örtlichen Zusammenhänge auf Plausibilität überprüfen.The plurality of optically captured images of the person to be checked, in particular of the face of the person to be checked, also makes it possible to create and create a three-dimensional facial image of the person to be checked using the data from the camera assigned to the control station and using the data from the camera of the mobile terminal device is subject to further scrutiny. The further check can be, for example, a comparison with the data in the database. In this way, a PAD (“presentation attack detection”) can be carried out, since it can now be checked whether the image is a three-dimensional head of a person to be checked and not just a photograph or an image. Here, too, the temporal and/or local relationships can be checked for plausibility.

Hinsichtlich der Ausgestaltungen des Verfahrens ist die genutzte Reihenfolge der genannten Verfahrensschritte zwar zweckmäßig, aber nicht zwingend. Beispielsweise kann zuerst die Kamera des mobilen Endgeräts zur Erfassung der zu überprüfenden Person oder deren Gesichts genutzt werden, bevor die Kamera der Kontrollstation zum Einsatz kommt und umgekehrt.With regard to the configuration of the method, the order of the method steps mentioned is useful, but not mandatory. For example, the camera of the mobile end device can be used to capture the person to be checked or their face before the camera of the control station is used and vice versa.

Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in der Figur alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen. Es sind somit auch Ausführungen als von der Erfindung umfasst und offenbart anzusehen, die in der Figur nicht explizit gezeigt oder erläutert sind, jedoch durch separierte Merkmalskombinationen aus den erläuterten Ausführungen hervorgehen und erzeugbar sind.The features and combinations of features mentioned above in the description and the features and combinations of features mentioned below in the description of the figures and/or shown alone in the figure can be used not only in the combination specified in each case, but also in other combinations or on their own, without going beyond the scope of the leave invention. Therefore, the invention also includes and discloses embodiments that are not explicitly shown or explained in the figure, but result from the explained embodiments and can be generated by separate combinations of features.

Weitere Vorteile, Merkmale und Einzelheiten der Erfindung ergeben sich aus den Ansprüchen, der nachfolgenden Beschreibung bevorzugter Ausführungsformen sowie anhand der Zeichnung. Dabei zeigt:

1 eine schematische Darstellung einer Anordnung zur optischen Erfassung einer zu überprüfenden Person.

Further advantages, features and details of the invention result from the claims, the following description of preferred embodiments and from the drawing. It shows:

1 a schematic representation of an arrangement for the optical detection of a person to be checked.

In 1 ist eine Anordnung 100 zur optischen Erfassung einer zu überprüfenden Person 200, insbesondere zur optischen Erfassung des Gesichts der zu überprüfenden Person 200, an einer Kontrollstation 104 gezeigt. Die Kontrollstation 104 umfasst eine vorliegend fest installierte Kamera 102, die beispielsweise auch als eine Nah-Infrarotkamera (NIR-Kamera) ausgebildet sein kann. Vorzugsweise ist die Kamera 102 als eine konventionelle VIS-Kamera gebildet. Die Kontrollstation 104 umfasst eine Prozessoreinheit 106, die ausgebildet ist, mit der der Kontrollstation 104 zugeordneten Kamera 102 über eine Kommunikationsverbindung zu kommunizieren, wobei die Prozessoreinheit 106 ferner eine Auswerteeinheit 108 umfasst. Außerdem ist eine Ausgabeeinheit 110 vorhanden, die ebenfalls in einer Kommunikationsverbindung mit der Prozessoreinheit 106 steht. Die Prozessoreinheit 106 ist ausgebildet, eine Kommunikationsverbindung mit wenigstens einem mobilen Endgerät 112 aufzubauen, welches vorzugsweise das Smartphone der zu überprüfenden Person 200 ist. Vorzugsweise wird diese Kommunikationsverbindung automatisiert aufgebaut, wenn sich die zu überprüfende Person 200 in einer Kontrollzone 102 oder einem Kontrollbereich der Kontrollstation 104 befindet. Die Anordnung 100 ist vorliegend außerdem derart ausgebildet, dass die Prozessoreinheit 106 auch eine Kommunikationsverbindung mit wenigstens einem zweiten mobilen Endgerät 114 aufbauen kann, wobei jedes der mobilen Endgeräte 112,114 eine eigene Kamera 116,118 umfasst.In 1 an arrangement 100 for the optical detection of a person to be checked 200, in particular for the optical detection of the face of the person to be checked 200, at a control station 104 is shown. The control station 104 comprises a camera 102 which is permanently installed in the present case and which can also be embodied as a near-infrared camera (NIR camera), for example. The camera 102 is preferably formed as a conventional VIS camera. The control station 104 includes a processor unit 106 which is designed to communicate with the camera 102 assigned to the control station 104 via a communication link, the processor unit 106 also including an evaluation unit 108 . There is also an output unit 110 which is also in communication with the processor unit 106 . The processor unit 106 is designed to set up a communication connection with at least one mobile terminal device 112, which is preferably the smartphone of the person 200 to be checked. This communication connection is preferably set up automatically when the person 200 to be checked is in a control zone 102 or a control area of the control station 104 . In the present case, the arrangement 100 is also designed in such a way that the processor unit 106 can also set up a communication connection with at least one second mobile terminal device 114, with each of the mobile terminals 112, 114 including its own camera 116, 118.

Die Kommunikationsverbindungen sind vorzugsweise drahtlos gebildet, beispielsweise durch eine Funkverbindung mittels Bluetooth (Standard gemäß 1112 802.15.1) oder mittels WLAN (engl. „wireless local area network“; Standard gemäß 1112 802.11, 1112 802.11a, 1112 802.11b, 1112 802.11h, 1112 802.11g, 1112 802.11n, 1112 802.11 ac oder 1112 802.11ad). Auch drahtlose Kommunikationsverbindungen mittels RFID (engl. „radio-frequency identification“), insbesondere mittels NFC (engl. „near field communication“), können bei der vorliegenden Anordnung 100 verwendet sein.The communication connections are preferably formed wirelessly, for example by a radio connection using Bluetooth (standard according to 1112 802.15.1) or by means of WLAN (English "wireless local area network"; standard according to 1112 802.11, 1112 802.11a, 1112 802.11b, 1112 802.11h , 1112 802.11g, 1112 802.11n, 1112 802.11ac or 1112 802.11ad). Wireless communication connections by means of RFID (“radio-frequency identification”), in particular by means of NFC (“near field communication”), can also be used in the present arrangement 100 .

Es besteht alternativ oder ergänzend auch die Möglichkeit, dass in der Kontrollzone 120 eine (nicht näher gezeigte) Lade- und Datenübertragungssäule vorliegt, die eine Mehrzahl an Steckern umfasst, die in einem Steckplatz an den mobilen Endgeräten 112, 114 eingesteckt werden können, wodurch eine drahtgebundene Verbindung zwischen den mobilen Endgeräten 114, 116 und der Prozessoreinheit 106 aufgebaut wird. Diese Stecker können die mobile Endgeräte 114, 116 dann auch zusätzlich mit Strom versorgen, insbesondere dann, wenn das mobile Endgerät 114, 116 bzw. das Smartphone einen kritischen Akkuladestand unterschritten hat, der eine optische Erfassung mittels des mobilen Endgeräts 114, 116 unmöglich machen würde.Alternatively or additionally, there is also the possibility that in the control zone 120 there is a charging and data transmission column (not shown in more detail) that includes a plurality of plugs that can be plugged into a slot on the mobile terminals 112, 114, whereby a wired connection between the mobile terminals 114, 116 and the processor unit 106 is established. These plugs can then also supply the mobile terminal devices 114, 116 with additional power, in particular when the mobile terminal device 114, 116 or the smartphone has fallen below a critical battery charge level that would make optical detection by means of the mobile terminal device 114, 116 impossible .

Die Prozessoreinheit 106 ist ihrerseits ebenfalls mit einer Spannungs- und Stromversorgung verbunden. Sie kann an das normale Stromnetz angeschlossen oder beispielsweise mit einem nicht näher dargestellten elektrischen Speicher, insbesondere mit einem Akkumulator, beispielsweise einem Lithiumionen-Akkumulator, elektrisch verbunden sein.The processor unit 106 is in turn also connected to a voltage and power supply. It can be connected to the normal power grid closed or, for example, be electrically connected to an electrical storage device, not shown in detail, in particular with an accumulator, for example a lithium-ion accumulator.

Die Auswerteeinheit 108 ist ausgebildet, die Daten, die mittels der der Kontrollstation 104 zugeordneten Kamera 102 von der zu überprüfenden Person 200 sowie mittels der Kameras 116,118 der mobilen Endgeräte 112,114 erfasst wurden, weiterzuverarbeiten und damit ein Verarbeitungsergebnis an die Ausgabeeinheit 110 zu übermitteln. Die Ausgabeeinheit 110 zeigt dann an, ob einer zu überprüfenden Person 200 oder ggfs. auch einer weiteren Person 202 Zutritt gewährt werden sollte oder nicht.Evaluation unit 108 is designed to further process the data recorded by camera 102 assigned to control station 104 from person 200 to be checked and by cameras 116, 118 of mobile terminals 112, 114, and thus to transmit a processing result to output unit 110. The output unit 110 then indicates whether a person 200 to be checked or possibly also another person 202 should be granted access or not.

Bei der Zutrittskontrolle wird die zu überprüfende Person 200 zunächst mittels der der Kontrollstation 104 zugeordneten Kamera 102 optisch erfasst. Anschließend wird die zu überprüfende Person 200 mittels der Kamera 116 des mobilen Endgeräts 112 und/oder mittels der Kamera 118 des zweiten mobilen Endgeräts 114 optisch erfasst. Anschließend werden die Daten, die mittels der der Kontrollstation 104 zugeordneten Kamera 102 sowie der mittels der Kamera 116 des mobilen Endgeräts 112 und/oder mittels der Kamera 118 des zweiten mobilen Endgeräts 114 erfasst wurden, an die der Kontrollstation 104 zugeordnete Prozessoreinheit 106 übertragen. Die Daten werden dann von der Prozessoreinheit 106 an die Auswerteeinheit 108 übergeben, die die erfassten Daten zu einem Verarbeitungsergebnis weiterverarbeitet. Das Verarbeitungsergebnis wird anschließend an die in Kommunikationsverbindung mit der Prozessoreinheit 106 stehende Ausgabeeinheit 110 übertragen, die das Verarbeitungsergebnis ausgibt.In the case of access control, the person 200 to be checked is first optically recorded by means of the camera 102 assigned to the control station 104 . The person 200 to be checked is then optically recorded by means of the camera 116 of the mobile terminal device 112 and/or by means of the camera 118 of the second mobile terminal device 114 . Subsequently, the data captured by means of camera 102 assigned to control station 104 and by means of camera 116 of mobile terminal device 112 and/or by means of camera 118 of second mobile terminal device 114 are transmitted to processor unit 106 assigned to control station 104. The data is then transferred from the processor unit 106 to the evaluation unit 108, which further processes the recorded data into a processing result. The processing result is then transmitted to the output unit 110 which is in communication with the processor unit 106 and which outputs the processing result.

Vorzugsweise wird bei der optischen Erfassung jeweils das Gesicht der zu überprüfenden Person 200 erfasst, sodass eine biometrische Prüfung erfolgen kann. Mithilfe von GPS-Sensoren der mobilen Endgeräte 112,114 können die Lage der mobilen Endgeräte 112,114 oder die Lage der zu überprüfenden Person 200 festgestellt werden, welche im Rahmen einer Plausibilitätsprüfung mit den Daten der fest installierten Kamera 102 abgeglichen werden können. Eine solche Plausibilitätsprüfung kann auch eine Standortprüfung der zu überprüfenden Person 200 auf den aus unterschiedlichen Richtungen erfassten Bildern umfassen. Ferner kann eine Lichteinfallsprüfung des Lichteinfalls auf die zu überprüfende Person 200 erfolgen. Ferner können zeitliche und/oder räumliche Zusammenhänge aus den Bilddaten extrahiert werden. Typischerweise sind die dabei übertragenen Bilddaten an die Prozessoreinheit 106 mit einem Zeitstempel versehen, der in die Überprüfung durch die Auswerteeinheit 108 einbezogen werden kann.The face of the person 200 to be checked is preferably detected in each case during the optical detection, so that a biometric check can be carried out. The position of the mobile terminals 112, 114 or the position of the person 200 to be checked can be determined with the aid of GPS sensors in the mobile terminals 112, 114, which can be compared with the data from the permanently installed camera 102 as part of a plausibility check. Such a plausibility check can also include a location check of the person 200 to be checked on the images captured from different directions. Furthermore, a light incidence check of the incidence of light on the person 200 to be checked can be carried out. Furthermore, temporal and/or spatial relationships can be extracted from the image data. Typically, the image data transmitted in this way is provided to the processor unit 106 with a time stamp, which can be included in the check by the evaluation unit 108 .

Bei der Überprüfung ist es von Vorteil, dass die von der Prozessoreinheit 106 empfangenen Daten mittels der Auswerteeinheit 108 mit Referenzdaten verglichen werden, die in einer in einem Speicher hinterlegten Datenbank gespeichert sind, und dass das Vergleichsergebnis als Verarbeitungsergebnis dann an die Ausgabeeinheit 110 übermittelt wird. Die Referenzdaten können beispielsweise die optisch erfassten Daten eines Ausweis-, Wert oder Sicherheitsdokuments sein.During the check, it is advantageous that the data received from processor unit 106 is compared by evaluation unit 108 with reference data that is stored in a database stored in a memory, and that the comparison result is then transmitted to output unit 110 as the processing result. The reference data can be, for example, the optically recorded data of an identity document, valuables or security document.

Um eine ergänzende biometrische Prüfung der Fingerabdrücke durchzuführen, umfassen die mobilen Endgeräte 112,114 außerdem einen Fingerabdrucksensor, wobei wenigstens einer der Fingerabdrücke der zu überprüfenden Person 200 erfasst werden kann. Die Prozessoreinheit 106 ist somit ferner ausgebildet, auch die Fingerabdruckdaten der Auswerteeinheit 108 zuzuführen, welche ihrerseits ausgebildet ist, die Fingerabdrücke der zu überprüfenden Person 200 in die Weiterverarbeitung und damit in das Verarbeitungsergebnis einzubeziehen, bevor es an die Ausgabeeinheit 110 übermittelt und von der Ausgabeeinheit 110 ausgegeben wird.In order to perform an additional biometric check of the fingerprints, the mobile terminals 112, 114 also include a fingerprint sensor, with at least one of the fingerprints of the person to be checked 200 being able to be recorded. Processor unit 106 is thus also configured to also feed the fingerprint data to evaluation unit 108, which in turn is configured to include the fingerprints of person 200 to be checked in the further processing and thus in the processing result before it is transmitted to output unit 110 and from output unit 110 is issued.

Mit der Anordnung 100 lassen sich zwei unterschiedliche Zutrittskontrollen realisieren. In einem ersten Beispiel erfolgt die Zutrittskontrolle einer einzelnen Person. In einem zweiten Beispiel folgt die Zutrittskontrolle für eine Gruppe, also von mehreren zu überprüfenden Personen gleichzeitig.With the arrangement 100, two different access controls can be implemented. In a first example, access is controlled by a single person. A second example is access control for a group, i.e. for several people to be checked at the same time.

Im ersten Beispielsfall wird die Kamera 102 „unterstützt“ durch die Kamera 116 des Smartphones der zu überprüfenden Person 200. Die zu überprüfende Person 200 betritt hierzu die Kontrollzone 120 und blickt in ihre Kamera 116 des mobilen Endgeräts 114. Dabei wird die (Blick-)Richtung derart optimiert, dass die Sonne und somit der Lichteinfall möglichst wenig stören. Der durch das mobile Endgerät 112 erfasste Videostrom wird an die Prozessoreinheit 106 übertragen, wobei in der Auswerteeinheit 110 geprüft wird, ob die empfangenen Daten konsistent mit den durch die Kamera 102 erfassten Daten sind; insbesondere im Hinblick auf die Anordnung von einzelnen Objekten in den Bildern, von (Aus-)Richtungen oder im Hinblick auf eine Lichtorientierung. Vorzugsweise werden die dabei erhaltenen Gesichtsbilddaten extrahiert und in einem Gesichtsmodell zusammengefasst, wobei vorzugsweise ein dreidimensionales Gesichtsmodell erstellt wird, um zugleich eine PAD („presentation attack detection“) durchführen zu können. Das Gesichtsmodell kann dann verglichen werden mit den in der Datenbank hinterlegten Referenzdaten. In the first example, the camera 102 is “supported” by the camera 116 of the smartphone of the person to be checked 200. For this purpose, the person to be checked 200 enters the control zone 120 and looks into their camera 116 of the mobile terminal device 114. The (eye) Direction optimized in such a way that the sun and thus the incidence of light interfere as little as possible. The video stream recorded by the mobile terminal device 112 is transmitted to the processor unit 106, it being checked in the evaluation unit 110 whether the received data are consistent with the data recorded by the camera 102; in particular with regard to the arrangement of individual objects in the pictures, of (off) directions or with regard to a light orientation. The face image data obtained in this way are preferably extracted and combined in a face model, with a three-dimensional face model preferably being created in order to be able to carry out a PAD (“presentation attack detection”) at the same time. The face model can then be compared with the reference data stored in the database.

Für den zweiten Beispielsfall einer Gruppen-Zutrittskontrolle ist eine Mehrzahl an zu überprüfenden Personen 200, beispielsweise zehn Personen, in der Kontrollzone 102 vorhanden. Es liegt damit auch eine Mehrzahl an mobilen Endgeräten 112, 114 mit Kameras 116, 118 vor. Jedenfalls liegen wenigstens zwei mobile Endgeräte 112,114 vor. Eine größere Personenanzahl und eine größere Anzahl an mobilen Endgeräten ist möglich, wobei die Personenanzahl mit der Endgeräteanzahl nicht übereinstimmen muss. Alle Mitglieder der Personengruppe in der Kontrollzone 120 fotografieren sich vorzugsweise gegenseitig, wobei insbesondere dann weniger Fotos für Gruppen-Kontrolle ausreichen, wenn sich auf den einzelnen Bildern eine Mehrzahl von Personen der Gruppe befindet. Die erfassten Bilder werden an die Prozessoreinheit 106 übertragen und durch die Auswerteeinheit 108 ausgewertet, wobei aus der Vielzahl der Daten einzelne Modelle, insbesondere Gesichtsmodelle, der Personen der Gruppe erstellt werden. Diese Gesichtsdaten werden mit den in der Datenbank vorhandenen Referenzdaten verglichen. Das Vergleichsergebnis in wird an der Ausgabeeinheit 110 ausgegeben, die auf diese Weise der Gruppe den Zutritt gewährt oder einen Zutritt unterbindet. Auch im Falle einer Gruppen-Zutrittskontrolle kann eine Plausibilitätsprüfung, beispielsweise anhand der Anzahl der authentifizierten Personen, erfolgen.For the second example of a group access control, there are a number of people 200 to be checked, for example ten people, in the control zone 102 . It also lies with that a plurality of mobile terminals 112, 114 with cameras 116, 118. In any case, there are at least two mobile terminals 112, 114. A larger number of people and a larger number of mobile devices is possible, although the number of people does not have to match the number of devices. All members of the group of people in the control zone 120 preferably photograph each other, with fewer photos being sufficient for group control in particular if there are a number of people in the group in the individual images. The recorded images are transmitted to the processor unit 106 and evaluated by the evaluation unit 108, individual models, in particular facial models, of the people in the group being created from the multitude of data. This facial data is compared with the reference data available in the database. The comparison result in is output to the output unit 110, which in this way grants access to the group or prohibits access. A plausibility check can also be carried out in the case of group access control, for example based on the number of authenticated persons.

Die erfindungsgemäße Anordnung 100 und das erfindungsgemäße Verfahren zeichnen sich dadurch aus, dass wenigstens eine, aber auch mehrere zu überprüfende Personen 200 an der Kontrollstation 104 bei sich ändernden Umgebungsbedingungen zuverlässig erfasst und kontrolliert werden können.The arrangement 100 according to the invention and the method according to the invention are characterized in that at least one person 200 to be checked, but also several persons 200 to be checked can be reliably detected and checked at the control station 104 when the environmental conditions change.

BezugszeichenlisteReference List

100100: Anordnungarrangement
102102: Kamera (Kontrollstation)camera (control station)
104104: Kontrollstationcontrol station
106106: Prozessoreinheitprocessor unit
108108: Auswerteeinheitevaluation unit
110110: Ausgabeeinheitoutput unit
112112: mobiles Endgerät (Smartphone)mobile device (smartphone)
114114: zweites mobiles Endgerät (Smartphone)second mobile device (smartphone)
116116: Kamera (mobiles Endgerät)Camera (mobile device)
118118: Kamera (zweites mobiles Endgerät)Camera (second mobile device)
120120: Kontrollzonecontrol zone
200200: zu überprüfende Personperson to be checked
202202: weitere Personanother person

Claims

Arrangement (100) for the optical detection of a person (200) to be checked at a control station (104), with a camera (102) assigned to the control station (104), with a processor unit (106) assigned to the control station (104), which is designed , to communicate with the camera (102) assigned to the control station (104) via a communication connection, wherein the processor unit (106) has an evaluation unit (108) which is designed to process data that is transmitted by means of the camera (102 ) are recorded by the person to be checked (200), to further process and then to transmit a processing result resulting therefrom to an output unit (110), which is designed to communicate with the processor unit (106) also via a communication link, the processor unit (106) is designed to establish a communication link with a mobile terminal (112) and data from a camera (116) of the mobile terminal device (112) of the person to be checked (200) to the evaluation unit (108), characterized in that the evaluation unit (108) is designed to also include that of the camera (116) of the mobile end device (112) in the further processing and thus in the processing result before it is transmitted to the output unit (110) and output by the output unit (110), that the mobile end device (112, 114) has at least one sensor for position determination of the camera (116, 118), and that the processor unit (106) is designed to also supply the data on the position of the camera (116, 118) to the evaluation unit (108), which in turn is designed to determine the position of the camera (116, 118) in the further processing and thus in the processing result before it is transmitted to the output unit (110) and output by the output unit (110).

Arrangement (100) after claim 1 , characterized in that the processor unit (106) is designed to set up a communication connection with at least one second mobile terminal (114) and data from a camera (118) of the second mobile terminal (114) from the person to be checked (200) are recorded, to the evaluation unit (108), which is designed to also include the data recorded by the camera (118) of the second mobile terminal device (114) in the further processing and thus in the processing result, before it is transmitted to the output unit (110). and is output from the output unit (110).

Arrangement (100) after claim 1 or 2 , characterized in that the mobile terminal device (112, 114) comprises at least one fingerprint sensor for detecting at least one of the fingerprints of the person to be checked (200), and that the processor unit (106) is designed to also supply the fingerprint data to the evaluation unit (108). , which in turn is designed to include the fingerprints of the person to be checked (200) in the further processing and thus in the processing result before it is transmitted to the output unit (110) and output by the output unit (110).

Arrangement (100) according to one of Claims 1 until 3 , characterized in that the processor unit (106) has access to a memory comprising a database, and that the evaluation unit (108) is designed to compare the recorded data with reference data stored in the database and to send the comparison result to the output unit ( 110) to transmit.

Method for the optical detection of a person (200) to be checked at a control station (104) with an arrangement (100) according to one of Claims 1 until 4 , comprising the following steps: - Optical detection of the person (200) to be checked by means of a camera (102) assigned to the control station (104), in particular a permanently installed one, - Optical detection of the person (200) to be checked by means of a camera (116) a mobile terminal device (112), wherein the mobile terminal device (112, 114) comprises at least one sensor for determining the position of its camera (116, 118) and the data on the position of the camera (116, 118) are also recorded, - transmission of the data, which were recorded by means of the camera (102) assigned to the control station (104) and by means of the camera (116) of the mobile terminal device (112) and by means of the sensor for determining the position of the mobile terminal device (112), to a processor unit assigned to the control station (104). (106), - further processing of the recorded data by an evaluation unit (108) of the processor unit (106) to produce a processing result, and - transmission of the processing result to a communication link ung with the processor unit (106) standing output unit (110), through which the processing result is output.

procedure after claim 5 , characterized in that the person to be checked (200) is additionally detected optically with a camera (118) of at least one second mobile terminal (114), and that the data of the camera (118) of the second mobile terminal (114) also transmitted to the processor unit (106), processed further by the evaluation unit (108) and thus taken into account in the processing result.

procedure after claim 6 , characterized in that the mutual position of the cameras (102, 116, 118) is determined using the data from a GPS sensor of the mobile terminal (112, 114) and subjected to a plausibility check.

Procedure according to one of Claims 5 until 7 , characterized in that the data received from the processor unit (106) are compared by the evaluation unit (108) with reference data stored in a database stored in a memory, and that the result of the comparison is transmitted to the output unit (110) as the processing result .

Procedure according to one of Claims 5 until 8th , characterized in that based on the data from the camera (102) assigned to the control station (104) and the data from the camera (116, 118) a three-dimensional facial image of the person (200) to be checked is created and subjected to a check.